StemmerRu/README.md

2.2 KiB
Raw Blame History

Стеммер Портера для русского языка

Build Status codecov

Стемминг - процесс получения основы слова из любой его формы. Иными словами, отсекает лишние суффиксы и окончания.

Самое очевидное применение - в полнотекстовом поиске, где нужно, чтобы слово находилось, даже если у него другое окончание.

Этот пакет - реализация стеммера Портера для русского языка на Go.

Интерфейс совместим со стеммером https://github.com/caneroj1/stemmer

Использование

основа := StemmerRu.Stem("слово")

Преобразует слово на входе в его основу на выходе

Так же, из библиотеки https://github.com/caneroj1/stemmer взяты следющие методы:

 // stem a list of words
  stems := StemmerRu.StemMultiple(strings)

  // stem a list of words in place, modifying the original slice
  StemmerRu.StemMultipleMutate(strings)
  
  // stem a list of words concurrently. this also stems in place, modifying
  // the original slice.
  // NOTE: the order of the strings is not guaranteed to be the same.
  StemmerRu.StemConcurrent(strings)

Пример

package main

import (
	"fmt"
	"github.com/neonxp/StemmerRu"
)

func main() {
	fmt.Println(StemmerRu.StemWord("безмолвны") // выведет: безмолвн
	fmt.Println(StemmerRu.StemWord("безмолвные") // выведет: безмолвн
	fmt.Println(StemmerRu.StemWord("безмолвный") // выведет: безмолвн
	fmt.Println(StemmerRu.StemWord("безмолвным") // выведет: безмолвн
	fmt.Println(StemmerRu.StemWord("безмолвных") // выведет: безмолвн
}