Stopwords

Some neutral complementary words in a human language can be frequently used in texts. For example the english words are, it and was. Such neutral words could potentially distort a search result completely:

  • A neutral word in the query can result in lots of irrelevant hits
  • Due to its frequent occurrence in texts it can also be scored high, i.e. lots of the "top hits" are completely irrelevant.

Such words are called stopwords. A index field that is stopword-aware completely ignores these words. They are not indexed at all by the field (hence not part of the field's queryable data).

Index language is important

Stopwords are language-dependant. The index language determines what stopwords to use.

The Index language determines the Stopwords that are used

Swedish Stopwords

  • alla, allt, att, av
  • blev, bli, blir, blivit
  • de, dem, den, denna, deras, dess, dessa, det, detta, dig, din, dina, ditt, du, då, där
  • efter, ej, eller, en, er, era, ert, ett
  • från, för
  • ha, hade, han, har, henne, hennes, hon, honom, hur, här
  • i, icke, ingen, inom, inte
  • jag, ju
  • kan, kunde
  • man, med, men, mellan, mig, min, mina, mitt, mot, mycket
  • ni, nu, någon, något, några, när
  • och, om, oss
  • samma, sedan, sig, sin, sina, sitta, själv, skulle, som, så, sådan, sådana, sådant
  • till
  • under, upp, ut, utan
  • vad, var, vara, varför, varit, varje, vars, vart, vem, vi, vid, vilka, vilkas, vilken, vilket, vår, våra, vårt
  • åt
  • än, är
  • över

English Stopwords

  • a, an, and, are, as, at
  • be, but, by
  • for
  • if, in, into, is, it
  • no, not
  • of, on, or
  • such
  • that, the, their, then, there, these, they, this, to
  • was, will, with

Norwegian Stopwords

  • alle, at, av
  • bare, begge, ble, blei, bli, blir, blitt, både, båe
  • da, de, deg, dei, deim, deira, deires, dem, den, denne, der, dere, deres, det, dette, di, din, disse, ditt, du, dykk, dykkar, då
  • eg, ein, eit, eitt, eller, elles, en, enn, er, et, ett, etter
  • for, fordi, fra, før
  • ha, hadde, han, hans, har, hennar, henne, hennes, her, hjå, ho, hoe, honom, hoss, hossen, hun, hva, hvem, hver, hvilke, hvilken, hvis, hvor, hvordan, hvorfor
  • i, ikke, ikkje, ingen, ingi, inkje, inn, inni
  • ja, jeg
  • kan, kom, korleis, korso, kun, kunne, kva, kvar, kvarhelst, kven, kvi, kvifor
  • man, mange, me, med, medan, meg, meget, mellom, men, mi, min, mine, mitt, mot, mykje
  • ned, no, noe, noen, noka, noko, nokon, nokor, nokre, nå, når
  • og, også, om, opp, oss, over
  • samme, seg, selv, si, sia, sidan, siden, sin, sine, sitt, sjøl, skal, skulle, slik, so, som, somme, somt, så, sånn
  • til
  • um, upp, ut, uten
  • var, vart, varte, ved, vere, verte, vi, vil, ville, vore, vors, vort, vår, være, vært
  • å

German Stopwords

  • aber, alle, allem, allen, aller, alles, als, also, am, an, ander, andere, anderem, anderen, anderer, anderes, anderm, andern, anderr, anders, auch, auf, aus
  • bei, bin, bis, bist
  • da, damit, dann, das, dasselbe, dazu, daß, dein, deine, deinem, deinen, deiner, deines, dem, demselben, den, denn, denselben, der, derer, derselbe, derselben, des, desselben, dessen, dich, die, dies, diese, dieselbe, dieselben, diesem, diesen, dieser, dieses, dir, doch, dort, du, durch
  • ein, eine, einem, einen, einer, eines, einig, einige, einigem, einigen, einiger, einiges, einmal, er, es, etwas, euch, euer, eure, eurem, euren, eurer, eures
  • für
  • gegen, gewesen
  • hab, habe, haben, hat, hatte, hatten, hier, hin, hinter
  • ich, ihm, ihn, ihnen, ihr, ihre, ihrem, ihren, ihrer, ihres, im, in, indem, ins, ist
  • jede, jedem, jeden, jeder, jedes, jene, jenem, jenen, jener, jenes, jetzt
  • kann, kein, keine, keinem, keinen, keiner, keines, können, könnte
  • machen, man, manche, manchem, manchen, mancher, manches, mein, meine, meinem, meinen, meiner, meines, mich, mir, mit, muss, musste
  • nach, nicht, nichts, noch, nun, nur
  • ob, oder, ohne
  • sehr, sein, seine, seinem, seinen, seiner, seines, selbst, sich, sie, sind, so, solche, solchem, solchen, solcher, solches, soll, sollte, sondern, sonst
  • um, und, uns, unse, unsem, unsen, unser, unses, unter, über
  • viel, vom, von, vor
  • war, waren, warst, was, weg, weil, weiter, welche, welchem, welchen, welcher, welches, wenn, werde, werden, wie, wieder, will, wir, wird, wirst, wo, wollen, wollte, während, würde, würden
  • zu, zum, zur, zwar, zwischen

Spanish Stopwords

  • a, al, algo, algunas, algunos, ante, antes
  • como, con, contra, cual, cuando
  • de, del, desde, donde, durante
  • e, el, él, ella, ellas, ellos, en, entre, era, erais, éramos, eran, eras, eres, es, esa, esas, ese, eso, esos, esta, estaba, estabais, estaban, estabas, estad, estada, estadas, estado, estados, estamos, estando, estar, estaremos, estará, estarán, estarás, estaré, estaréis, estaría, estaríais, estaríamos, estarían, estarías, estas, este, estemos, esto, estos, estoy, estuve, estuviera, estuvierais, estuvieran, estuvieras, estuvieron, estuviese, estuvieseis, estuviesen, estuvieses, estuvimos, estuviste, estuvisteis, estuviéramos, estuviésemos, estuvo, está, estábamos, estáis, están, estás, esté, estéis, estén, estés
  • fue, fuera, fuerais, fueran, fueras, fueron, fuese, fueseis, fuesen, fueses, fui, fuimos, fuiste, fuisteis, fuéramos, fuésemos
  • ha, habida, habidas, habido, habidos, habiendo, habremos, habrá, habrán, habrás, habré, habréis, habría, habríais, habríamos, habrían, habrías, habéis, había, habíais, habíamos, habían, habías, han, has, hasta, hay, haya, hayamos, hayan, hayas, hayáis, he, hemos, hube, hubiera, hubierais, hubieran, hubieras, hubieron, hubiese, hubieseis, hubiesen, hubieses, hubimos, hubiste, hubisteis, hubiéramos, hubiésemos, hubo
  • la, las, le, les, lo, los
  • me, mi, mis, mucho, muchos, muy, más, mí, mía, mías, mío, míos
  • nada, ni, no, nos, nosotras, nosotros, nuestra, nuestras, nuestro, nuestros
  • o, os, otra, otras, otro, otros
  • para, pero, poco, por, porque
  • que, quien, quienes, qué
  • se, sea, seamos, sean, seas, seremos, será, serán, serás, seré, seréis, sería, seríais, seríamos, serían, serías, seáis, sido, siendo, sin, sobre, sois, somos, son, soy, su, sus, suya, suyas, suyo, suyos, sí
  • también, tanto, te, tendremos, tendrá, tendrán, tendrás, tendré, tendréis, tendría, tendríais, tendríamos, tendrían, tendrías, tened, tenemos, tenga, tengamos, tengan, tengas, tengo, tengáis, tenida, tenidas, tenido, tenidos, teniendo, tenéis, tenía, teníais, teníamos, tenían, tenías, ti, tiene, tienen, tienes, todo, todos, tu, tus, tuve, tuviera, tuvierais, tuvieran, tuvieras, tuvieron, tuviese, tuvieseis, tuviesen, tuvieses, tuvimos, tuviste, tuvisteis, tuviéramos, tuviésemos, tuvo, tuya, tuyas, tuyo, tuyos, tú
  • un, una, uno, unos
  • vosotras, vosotros, vuestra, vuestras, vuestro, vuestros
  • y, ya, yo

When Stopwords are modified, you should typically re-index all data (so already indexed data will correspond and act according to the "new" Stopwords setup)