w systemach wyszukiwania pełnotekstowego: w MySQL pełnotekstowe indeksy mogą korzystać z wbudowanej listy słów stopujących; listę można nadpisać plikiem (ft_stopword_file) lub wyłączyć (ustawiając pustą wartość), a w InnoDB możliwe jest też stosowanie tabel stopwordów per-tabela. w PostgreSQL słowa stopujące są definiowane w plikach .stop wykorzystywanych przez słowniki wyszukiwania; przy zapytaniach frazowych mogą być uwzględniane jako „luki” (operatory <N>) zamiast całkowitego usunięcia. w Apache Lucene filtrowanie stopwordów realizuje się na etapie analizy tekstu; lista angielskich stopwordów jest dostarczana m.in. przez StopAnalyzer, a w pewnym momencie StandardAnalyzer przestał domyślnie usuwać angielskie stopwordy.

Przypisy

Linki zewnętrzne Full-Text Stopwords (MySQL) Text Search Dictionaries (PostgreSQL) Dropping common terms: stop words (Introduction to Information Retrieval) Automatically Building a Stopword List for an IR System (Lo, He, Ounis, 2005) Stop-words collection (archiwum Wayback Machine)

Kategoria:Wyszukiwarki internetowe Kategoria:Przetwarzanie języka naturalnego