explosion/spaCy
1
1
Fork 0
mirror of https://github.com/explosion/spaCy.git synced 2025-11-04 01:48:04 +03:00
Code Issues Packages Projects Releases Wiki Activity

Remove significant or not very frequent words from stop word list [es]

Browse Source 
The list of stop words for Spanish contained many inadequate words, see:

https://github.com/explosion/spaCy/issues/3052#issuecomment-1100760100

Removed words:
- verb forms of 'trabajar' (work) and intentar (try)
- words related to 'empleo' (employment)
- incorrect words: ampleamos, arribaabajo, soyos, paìs
- miscellaneous words due to being too significant of too infrequent:
  actualmente, aproximadamente, antaño, cosas, ejemplo, horas, general,
  pais, principalmente, raras

Added other stop words for completion:
- Spanish one-letter words
- numbers up to twelve

Some reformatting to 79 columns.

When in doubt, the English and German lists have been consulted as good
examples.
This commit is contained in:
mgr 2022-04-18 22:04:02 +02:00
parent e9c26f2ee9
commit 2a2654c756
1 changed files with 41 additions and 43 deletions
Show Stats Download Patch File Download Diff File Expand all files Collapse all files

84
spacy/lang/es/stop_words.py
View File

@ -1,82 +1,80 @@
STOP_WORDS = set( STOP_WORDS = set(
""" """
actualmente acuerdo adelante ademas además adrede afirmó agregó ahi ahora ahí a acuerdo adelante ademas además afirmó agregó ahi ahora ahí al algo alguna
al algo alguna algunas alguno algunos algún alli allí alrededor ambos ampleamos algunas alguno algunos algún alli allí alrededor ambos ante anterior antes
antano antaño ante anterior antes apenas aproximadamente aquel aquella aquellas apenas aproximadamente aquel aquella aquellas aquello aquellos aqui aquél
aquello aquellos aqui aquél aquélla aquéllas aquéllos aquí arriba arribaabajo aquélla aquéllas aquéllos aquí arriba aseguró asi así atras aun aunque añadió
aseguró asi así atras aun aunque ayer añadió aún aún
bajo bastante bien breve buen buena buenas bueno buenos bajo bastante bien breve buen buena buenas bueno buenos
cada casi cerca cierta ciertas cierto ciertos cinco claro comentó como con cada casi cierta ciertas cierto ciertos cinco claro comentó como con conmigo
conmigo conocer conseguimos conseguir considera consideró consigo consigue conocer conseguimos conseguir considera consideró consigo consigue consiguen
consiguen consigues contigo contra cosas creo cual cuales cualquier cuando consigues contigo contra creo cual cuales cualquier cuando cuanta cuantas
cuanta cuantas cuanto cuantos cuatro cuenta cuál cuáles cuándo cuánta cuántas cuanto cuantos cuatro cuenta cuál cuáles cuándo cuánta cuántas cuánto cuántos
cuánto cuántos cómo cómo
da dado dan dar de debajo debe deben debido decir dejó del delante demasiado da dado dan dar de debajo debe deben debido decir dejó del delante demasiado
demás dentro deprisa desde despacio despues después detras detrás dia dias dice demás dentro deprisa desde despacio despues después detras detrás dia dias dice
dicen dicho dieron diferente diferentes dijeron dijo dio donde dos durante día dicen dicho dieron diez diferente diferentes dijeron dijo dio doce donde dos
días dónde durante día días dónde
ejemplo el ella ellas ello ellos embargo empleais emplean emplear empleas e el ella ellas ello ellos embargo en encima encuentra enfrente enseguida
empleo en encima encuentra enfrente enseguida entonces entre era eramos eran entonces entre era eramos eran eras eres es esa esas ese eso esos esta estaba
eras eres es esa esas ese eso esos esta estaba estaban estado estados estais estaban estado estados estais estamos estan estar estará estas este esto estos
estamos estan estar estará estas este esto estos estoy estuvo está están ex estoy estuvo está están excepto existe existen explicó expresó él ésa ésas ése
excepto existe existen explicó expresó él ésa ésas ése ésos ésta éstas éste ésos ésta éstas éste éstos
éstos
fin final fue fuera fueron fui fuimos fin final fue fuera fueron fui fuimos
general gran grandes gueno gran grande grandes
ha haber habia habla hablan habrá había habían hace haceis hacemos hacen hacer ha haber habia habla hablan habrá había habían hace haceis hacemos hacen hacer
hacerlo haces hacia haciendo hago han hasta hay haya he hecho hemos hicieron hacerlo haces hacia haciendo hago han hasta hay haya he hecho hemos hicieron
hizo horas hoy hubo hizo hoy hubo
igual incluso indicó informo informó intenta intentais intentamos intentan igual incluso indicó informo informó ir
intentar intentas intento ir
junto junto
la lado largo las le lejos les llegó lleva llevar lo los luego lugar la lado largo las le les llegó lleva llevar lo los luego
mal manera manifestó mas mayor me mediante medio mejor mencionó menos menudo mi mal manera manifestó mas mayor me mediante medio mejor mencionó menos menudo mi
mia mias mientras mio mios mis misma mismas mismo mismos modo momento mucha mia mias mientras mio mios mis misma mismas mismo mismos modo mucha muchas
muchas mucho muchos muy más mí mía mías mío míos mucho muchos muy más mí mía mías mío míos
nada nadie ni ninguna ningunas ninguno ningunos ningún no nos nosotras nosotros nada nadie ni ninguna ningunas ninguno ningunos ningún no nos nosotras nosotros
nuestra nuestras nuestro nuestros nueva nuevas nuevo nuevos nunca nuestra nuestras nuestro nuestros nueva nuevas nueve nuevo nuevos nunca
ocho os otra otras otro otros o ocho once os otra otras otro otros
pais para parece parte partir pasada pasado paìs peor pero pesar poca pocas para parece parte partir pasada pasado paìs peor pero pesar poca pocas poco
poco pocos podeis podemos poder podria podriais podriamos podrian podrias podrá pocos podeis podemos poder podria podriais podriamos podrian podrias podrá
podrán podría podrían poner por porque posible primer primera primero primeros podrán podría podrían poner por porque posible primer primera primero primeros
principalmente pronto propia propias propio propios proximo próximo próximos pronto propia propias propio propios proximo próximo próximos pudo pueda puede
pudo pueda puede pueden puedo pues pueden puedo pues
qeu que quedó queremos quien quienes quiere quiza quizas quizá quizás quién quiénes qué qeu que quedó queremos quien quienes quiere quiza quizas quizá quizás quién
quiénes qué
raras realizado realizar realizó repente respecto realizado realizar realizó repente respecto
sabe sabeis sabemos saben saber sabes salvo se sea sean segun segunda segundo sabe sabeis sabemos saben saber sabes salvo se sea sean segun segunda segundo
según seis ser sera será serán sería señaló si sido siempre siendo siete sigue según seis ser sera será serán sería señaló si sido siempre siendo siete sigue
siguiente sin sino sobre sois sola solamente solas solo solos somos son soy siguiente sin sino sobre sois sola solamente solas solo solos somos son soy su
soyos su supuesto sus suya suyas suyo sé sí sólo supuesto sus suya suyas suyo suyos sé sí sólo
tal tambien también tampoco tan tanto tarde te temprano tendrá tendrán teneis tal tambien también tampoco tan tanto tarde te temprano tendrá tendrán teneis
tenemos tener tenga tengo tenido tenía tercera ti tiempo tiene tienen toda tenemos tener tenga tengo tenido tenía tercera tercero ti tiene tienen toda
todas todavia todavía todo todos total trabaja trabajais trabajamos trabajan todas todavia todavía todo todos total tras trata través tres tu tus tuvo tuya
trabajar trabajas trabajo tras trata través tres tu tus tuvo tuya tuyas tuyo tuyas tuyo tuyos tú
tuyos tú
ultimo un una unas uno unos usa usais usamos usan usar usas uso usted ustedes u ultimo un una unas uno unos usa usais usamos usan usar usas uso usted ustedes
última últimas último últimos última últimas último últimos
va vais valor vamos van varias varios vaya veces ver verdad verdadera verdadero va vais vamos van varias varios vaya veces ver verdad verdadera verdadero vez
vez vosotras vosotros voy vuestra vuestras vuestro vuestros vosotras vosotros voy vuestra vuestras vuestro vuestros
ya yo y ya yo
""".split() """.split()
) )