Stopwords
Some neutral complementary words in a human language can be frequently used in texts. For example the english words are, it and was. Such neutral words could potentially distort a search result completely:
- A neutral word in the query can result in lots of irrelevant hits
- Due to its frequent occurrence in texts it can also be scored high, i.e. lots of the "top hits" are completely irrelevant.
Such words are called stopwords. A index field that is stopword-aware completely ignores these words. They are not indexed at all by the field (hence not part of the field's queryable data).
Index language is important
Stopwords are language-dependant. The index language determines what stopwords to use.
Swedish Stopwords
- alla, allt, att, av
- blev, bli, blir, blivit
- de, dem, den, denna, deras, dess, dessa, det, detta, dig, din, dina, ditt, du, då, där
- efter, ej, eller, en, er, era, ert, ett
- från, för
- ha, hade, han, har, henne, hennes, hon, honom, hur, här
- i, icke, ingen, inom, inte
- jag, ju
- kan, kunde
- man, med, men, mellan, mig, min, mina, mitt, mot, mycket
- ni, nu, någon, något, några, när
- och, om, oss
- på
- samma, sedan, sig, sin, sina, sitta, själv, skulle, som, så, sådan, sådana, sådant
- till
- under, upp, ut, utan
- vad, var, vara, varför, varit, varje, vars, vart, vem, vi, vid, vilka, vilkas, vilken, vilket, vår, våra, vårt
- åt
- än, är
- över
English Stopwords
- a, an, and, are, as, at
- be, but, by
- for
- if, in, into, is, it
- no, not
- of, on, or
- such
- that, the, their, then, there, these, they, this, to
- was, will, with
Norwegian Stopwords
- alle, at, av
- bare, begge, ble, blei, bli, blir, blitt, både, båe
- da, de, deg, dei, deim, deira, deires, dem, den, denne, der, dere, deres, det, dette, di, din, disse, ditt, du, dykk, dykkar, då
- eg, ein, eit, eitt, eller, elles, en, enn, er, et, ett, etter
- for, fordi, fra, før
- ha, hadde, han, hans, har, hennar, henne, hennes, her, hjå, ho, hoe, honom, hoss, hossen, hun, hva, hvem, hver, hvilke, hvilken, hvis, hvor, hvordan, hvorfor
- i, ikke, ikkje, ingen, ingi, inkje, inn, inni
- ja, jeg
- kan, kom, korleis, korso, kun, kunne, kva, kvar, kvarhelst, kven, kvi, kvifor
- man, mange, me, med, medan, meg, meget, mellom, men, mi, min, mine, mitt, mot, mykje
- ned, no, noe, noen, noka, noko, nokon, nokor, nokre, nå, når
- og, også, om, opp, oss, over
- på
- samme, seg, selv, si, sia, sidan, siden, sin, sine, sitt, sjøl, skal, skulle, slik, so, som, somme, somt, så, sånn
- til
- um, upp, ut, uten
- var, vart, varte, ved, vere, verte, vi, vil, ville, vore, vors, vort, vår, være, vært
- å
German Stopwords
- aber, alle, allem, allen, aller, alles, als, also, am, an, ander, andere, anderem, anderen, anderer, anderes, anderm, andern, anderr, anders, auch, auf, aus
- bei, bin, bis, bist
- da, damit, dann, das, dasselbe, dazu, daß, dein, deine, deinem, deinen, deiner, deines, dem, demselben, den, denn, denselben, der, derer, derselbe, derselben, des, desselben, dessen, dich, die, dies, diese, dieselbe, dieselben, diesem, diesen, dieser, dieses, dir, doch, dort, du, durch
- ein, eine, einem, einen, einer, eines, einig, einige, einigem, einigen, einiger, einiges, einmal, er, es, etwas, euch, euer, eure, eurem, euren, eurer, eures
- für
- gegen, gewesen
- hab, habe, haben, hat, hatte, hatten, hier, hin, hinter
- ich, ihm, ihn, ihnen, ihr, ihre, ihrem, ihren, ihrer, ihres, im, in, indem, ins, ist
- jede, jedem, jeden, jeder, jedes, jene, jenem, jenen, jener, jenes, jetzt
- kann, kein, keine, keinem, keinen, keiner, keines, können, könnte
- machen, man, manche, manchem, manchen, mancher, manches, mein, meine, meinem, meinen, meiner, meines, mich, mir, mit, muss, musste
- nach, nicht, nichts, noch, nun, nur
- ob, oder, ohne
- sehr, sein, seine, seinem, seinen, seiner, seines, selbst, sich, sie, sind, so, solche, solchem, solchen, solcher, solches, soll, sollte, sondern, sonst
- um, und, uns, unse, unsem, unsen, unser, unses, unter, über
- viel, vom, von, vor
- war, waren, warst, was, weg, weil, weiter, welche, welchem, welchen, welcher, welches, wenn, werde, werden, wie, wieder, will, wir, wird, wirst, wo, wollen, wollte, während, würde, würden
- zu, zum, zur, zwar, zwischen
Spanish Stopwords
- a, al, algo, algunas, algunos, ante, antes
- como, con, contra, cual, cuando
- de, del, desde, donde, durante
- e, el, él, ella, ellas, ellos, en, entre, era, erais, éramos, eran, eras, eres, es, esa, esas, ese, eso, esos, esta, estaba, estabais, estaban, estabas, estad, estada, estadas, estado, estados, estamos, estando, estar, estaremos, estará, estarán, estarás, estaré, estaréis, estaría, estaríais, estaríamos, estarían, estarías, estas, este, estemos, esto, estos, estoy, estuve, estuviera, estuvierais, estuvieran, estuvieras, estuvieron, estuviese, estuvieseis, estuviesen, estuvieses, estuvimos, estuviste, estuvisteis, estuviéramos, estuviésemos, estuvo, está, estábamos, estáis, están, estás, esté, estéis, estén, estés
- fue, fuera, fuerais, fueran, fueras, fueron, fuese, fueseis, fuesen, fueses, fui, fuimos, fuiste, fuisteis, fuéramos, fuésemos
- ha, habida, habidas, habido, habidos, habiendo, habremos, habrá, habrán, habrás, habré, habréis, habría, habríais, habríamos, habrían, habrías, habéis, había, habíais, habíamos, habían, habías, han, has, hasta, hay, haya, hayamos, hayan, hayas, hayáis, he, hemos, hube, hubiera, hubierais, hubieran, hubieras, hubieron, hubiese, hubieseis, hubiesen, hubieses, hubimos, hubiste, hubisteis, hubiéramos, hubiésemos, hubo
- la, las, le, les, lo, los
- me, mi, mis, mucho, muchos, muy, más, mí, mía, mías, mío, míos
- nada, ni, no, nos, nosotras, nosotros, nuestra, nuestras, nuestro, nuestros
- o, os, otra, otras, otro, otros
- para, pero, poco, por, porque
- que, quien, quienes, qué
- se, sea, seamos, sean, seas, seremos, será, serán, serás, seré, seréis, sería, seríais, seríamos, serían, serías, seáis, sido, siendo, sin, sobre, sois, somos, son, soy, su, sus, suya, suyas, suyo, suyos, sí
- también, tanto, te, tendremos, tendrá, tendrán, tendrás, tendré, tendréis, tendría, tendríais, tendríamos, tendrían, tendrías, tened, tenemos, tenga, tengamos, tengan, tengas, tengo, tengáis, tenida, tenidas, tenido, tenidos, teniendo, tenéis, tenía, teníais, teníamos, tenían, tenías, ti, tiene, tienen, tienes, todo, todos, tu, tus, tuve, tuviera, tuvierais, tuvieran, tuvieras, tuvieron, tuviese, tuvieseis, tuviesen, tuvieses, tuvimos, tuviste, tuvisteis, tuviéramos, tuviésemos, tuvo, tuya, tuyas, tuyo, tuyos, tú
- un, una, uno, unos
- vosotras, vosotros, vuestra, vuestras, vuestro, vuestros
- y, ya, yo
When Stopwords are modified, you should typically re-index all data (so already indexed data will correspond and act according to the "new" Stopwords setup)