InnoDBで全文検索するぞ！

1. InnoDBだってシュッと
全文検索したい！
2016/01/11 (月)
第二回 CAMPHOR- × KMC 合同 LT大会

2. こんにちは！
・@tanishiking
・京都大学工学部情報学科 B3
・去年の4月ぐらいから CAMPHOR-
・DBとかに興味ある(できるとは言ってない)

3. EXPLAIN
してますか？

4. SELECT * FROM table WHERE
text LIKE ‘%foo%’;

5. SELECT * FROM table WHERE
text LIKE ‘%foo%’;
普通のインデックスだとLIKE検索は前方一致
でないとインデックスが使用されない

6. かなしい

7. ならば
全文検索だ！

8. 全文検索エンジンとかいろいろ
あるけど環境ととのえるの大変
今ある環境でスッと
全文検索したい

9. MySQL 5.6.4 から フルテキストイ
ンデックスが InnoDB でも使え
る！

10. MySQL 5.6.4 から フルテキストイ
ンデックスが InnoDB でも使え
る！
※ただし日本語のような個々の単語に区切り文字がない言語はサポートしないものとする

11. MySQL 5.6.4 から フルテキストイ
ンデックスが InnoDB でも使え
る！
※ただし日本語のような個々の単語に区切り文字がない言語はサポートしないものとする
どういうこと？

12. 日本語を区切るためには？
mecab
すもももももももものうち
すもも 名詞,一般,*,*,*,*,すもも,スモモ,スモモ
も 助詞,係助詞,*,*,*,*,も,モ,モ
もも 名詞,一般,*,*,*,*,もも,モモ,モモ
も 助詞,係助詞,*,*,*,*,も,モ,モ
もも 名詞,一般,*,*,*,*,もも,モモ,モモ
の 助詞,連体化,*,*,*,*,の,ノ,ノ
うち 名詞,非自立,副詞可能,*,*,*,うち,ウチ,ウチ
分かち書き

13. 日本語を区切るためには？
ngram
テキストをn文字ごとに区切る
bigram (n = 2) なら
こんにちは
↓
こん, んに, にち. ちは

14. く…空白で区切られた
文章は
いけるんでしょ…???

15. CREATE TABLE `test` (
`id` AUTO_INCREMENT NOT NULL PRIMARY KEY,
`text` varchar(255) NOT NULL,
FULLTEXT KEY `ngram_idx` (`text`)
) Engine=InnoDB DEFAULT CHARSET=utf-8;
INSERT INTO `test` (`text`) VALUES (
“すもも も もも も もも の うち”
);
INSERT INTO `test` (`text`) VALUES (
“こん んに にち ちは”
);

16. 安心して
ください :)

17. MySQL 5.7.6 から日本語・中国
語・韓国語で利用可能な ngram
パーサーが InnoDB でサポート！
ダウンロードすればmecabパーサーも使えるよ！

18. CREATE TABLE `test` (
`id` AUTO_INCREMENT NOT NULL PRIMARY KEY,
`text` varchar(255) NOT NULL,
FULLTEXT KEY `ngram_idx` (`text`) WITH PARSER ngram
) Engine=InnoDB DEFAULT CHARSET=utf-8;
INSERT INTO `test` (`text`) VALUES (
“すもももももももものうち”
);
ngram の n の値は ngram_token_size で設定可能(デフォルトは2)

19. SELECT * FROM table WHERE
text LIKE ‘%foo%’;

20. SELECT * FROM table WHERE
(MATCH (text) AGAINST
(‘“foo”’ IN BOOLEAN MODE));

21. ・インデックスサイズがでかい
・インデックス作成にめっちゃ時間かかる

22. MySQL + groonga = mroonga
他の選択肢
更新・挿入性能は mroonga のほうが上
検索性能は InnoDB fulltext index のほうが上っぽい

23. ありがとう
ございました