SQLite– tag –

ローカル検索ツールqmdで日本語クエリが0件になる現象に遭遇した。原因はSQLite FTS5の既定トークナイザunicode61が日本語を単語分割できないことだった。同じ問題に遭遇しうる人向けに、原因の仕組みとtrigram/形態素解析/ICU/外部拡張という対処法の選択肢を整理する。