Mi a bélyegzés, panda-copywriting

A stemming a szó (szárak) alapja, vagyis annak a része, amely közvetíti lexikai jelentését. Például:

erdő -> erdő
túrázás -> túrázás
étkező -> asztal

Általában a bélyegzés során egyszerűen csak a végeket és az utótagokat dobják le. De az orosz szavaknak meglehetősen összetett szerkezete van, így az orosz nyelv esetében a bélyegzést gyakran más nyelvi algoritmusokkal együtt használják (például lemmatizációval).

A szóródás a "szár" szóból származik - szár, szár, szár. Természetesen az angol nyelvből érkezett hozzánk, és az átalakulás első algoritmusa az amerikai Julie Beth Lovins 1968-ban alakult ki.

Mi a használata a rágás?

Először is, a bélyegzés algoritmusait a keresőmotorok szükségesek. Segítségével a Yandex és a Google általánosított felhasználói kéréseket és növeli a keresési eredmények relevanciáját. A bélyegzésnek köszönhetően nem csak a szavakat találják meg a lekérdezésből, hanem azok különböző formáit is, amelyek a felhasználó érdeklődésére számíthatnak.

Például, ha valaki beírta a "macska" szót, akkor a keresőmotorok egyszerre mutatják meg azokat, és azokat az oldalakat, ahol a "macska" szó szerepel. Természetesen a kibocsátás sorrendje más keresési algoritmusoktól is függ: az LSI, a viselkedési tényezők számbavétele stb.

Algoritmusok és bélyegző programok

A szavak alapjainak gyors megtalálásához egy speciális programra van szükséged - egy stemmer. Napjainkban rengeteg van: ingyenes és kereskedelmi, online munka és forráskódként terjesztve. De mindegyik, általában, két algoritmusra épül.

Az első a speciális táblázatok használata a program által, ahol minden szót és azok szárait beírnak. Az algoritmus gyorsan és pontosan működik, de erőforrásokat igényel, és nem arra szolgál, hogy ismeretlen szavakat konvertáljon.

A második az egyes jogcímek elrendezése és befejezése. Az algoritmus nem igényel nagy erőforrásokat, és könnyen használható ismeretlen szavakkal, ugyanakkor gyakran hibás. A fejlesztők általában az ilyen módszerek hibridjét preferálják, vagyis a végek csonkolását és a szárak táblázatait.

Hiba történt? Kérem, válassza ki az egérrel, és nyomja meg a balra a Ctrl + Enter billentyűt.

Értékelje ezt a cikket

Kapcsolódó cikkek