Technologie wyszukiwania pełnotekstowego
LICZBA DNI: 3 (24h)
KOD KURSU: FULLTEXT
Dostosowany program 
O szkoleniu
DLA KOGO?
Szkolenie adresowane jest do osób zainteresowanych funkcjonalnością wyszukiwania pełnotekstowego i różnych spoosbów jej wykorzystania.
WYMAGANIA
Od uczestników wymagana jest podstawowa umiejętność znajomość baz danych i języka SQL oraz programowania w języku Java.
ZALETY
Program obejmuje całościowo i wyczerpująco zagadnienia związane z wyszukiwaniem pełnotekstowym, przedstawia wiele ciekawych aspektów, typowe problemy oraz najlepsze praktyki.
W przeciwieństwie do większości tego typu szkoleń, zawiera ono część warsztatową, która pozwoli na ugruntowanie wiedzy również w praktycznym jej aspekcie.
Cele szkolenia
Poznanie czym jest wyszukiwanie pełnotekstowe, zagadnienia z nim związane, jakie są możliwości jego realizacji oraz najlepsze praktyki.
Poznanie szerokiej gamy produktów realizujących tą funkcjonalność uwzględniając rozwiązania zarówno bazodanowe jak i dedykowane biblioteki programistyczne, w szczególności te wiodące na rynku jak Apache Lucene, Apache Solr, Sphinx Search czy Hibernate Search.
Nauka zaprojektowania oraz oprogramowania systemu dostarczającego funkcjonalność wyszukiwania pełnotekstowego.
Omówienie tematu w bardzo szerokim aspekcie tak, aby uczestnik był przygotowany do realizacji tego zadania tak, aby spełniło ono wszystkie wymagania oraz potrafił wybrać rozwiązanie najlepsze w danej sytuacji.
Program
Koncepcja wyszukiwania pełnotekstowego
- Idea wyszukiwania pełnotekstowego (full-text search, FTS)
- Gdzie przydatne jest wyszukiwanie pełnotekstowe?
- Strony WWW
- Aplikacje webowe
- Bazy danych
- Poczta e-mail
Wyszukiwanie pełnotekstowe w szczegółach, typowe problemy
- Użycie LIKE
- Realizacja
- Stop-słowa
- Lematyzacja
- Stemming
- Morfologia języków
- Indeksy TF-IDF
- Ocena dopasowania szukanego tekstu do tekstu znalezionego
- Wyszukiwanie aproksymacyjne
- Indeksy w bazie danych
- Konfiguracja indeksów w bazie danych
- Miejsce przetrzymywania indeksów
- Wydajne indeksowanie
- Utrzymywanie indeksów
- Transakcyjność
- Architektura separacji odpowiedzialności komend i zapytań (Command Query Responsibility Separation - CQRS)
- Rozproszenie wyszukiwania
- Przeszukiwanie pełnotekstowe w plikach różnego formatu (PDF, XML, MS Office, ...)
- Skalowalność
Wsparcie wyszukiwania pełnotekstowego na poziomie źródeł danych
- Opensource'owe bazy danych
- MySQL
- Możliwosci Fulltext
- Realizacja
- PostgreSQL
- Możliwości
- Realizacja
- Komercyjne bazy danych
- MS SQL Server
- Możliwości
- Realizacja
- Dostępność w produktach Microsoft Exchange i Microsoft SharePoint
- Zalety i wady
- Oracle
- Możliwości Oracle Text
- Realizacja
- IBM DB2
- NoSQL
Wspracie wyszukiwania na poziomie dedykowanych bibliotek programistycznych i serwerów
- Apache Lucene
- Możliwości
- Realizacja
- Indeksowanie
- Wyszukiwanie
- Narzędzie do inspekcji indeksów - Luke
- Apache Solr
- Relacja z Apache Lucene
- Możliwości
- Przykłady wdrożeń
- Konfiguracja (Schema.xml, Solrconfig.xml)
- Realizacja
- Architektura
- Dokumenty
- Indexy
- Pola dynamiczne
- Pluginy
- Faceted search
- Sphinx Search
- Możliwości
- Realizacja
- SphinxAPI, SphinxQL
- Główne moduły
- Konfiguracja – plik sphinx.conf
- Budowanie indexów
- Zapytania
- Hibernate Search
- Możliwości
- Realizacja
- Integracja z Apache Lucene
- Konfiguracja: hiberante.cfg.xml i hibernate.properties, API do konfiguracji
- Architektura
- Adnotacje Hibernate Search: Indexed, Analyzer, ClassBridge, DocumentId
- Mapowanie encji
- Hibernate Analyzer
- Typy zapytań: TermQuery, WildcardQuery, PrefixQuery, PhraseQuery i inne
- API do wyszukiwania: Query, QueryBuilder i inne
- Strategie przebudowywania indeksu
- Inne
- Solandra
- Elasticsearch
- DataparkSearch
- Ferret
- mnoGoSearch
- Xapian
- Google Custom Search Index
Szkolenia powiązane
