Enviar búsqueda
Cargar
Groongaでのタグ検索と表記揺れとの戦い
•
0 recomendaciones
•
3,178 vistas
Naoya Murakami
Seguir
Denunciar
Compartir
Denunciar
Compartir
1 de 46
Descargar ahora
Descargar para leer sin conexión
Recomendados
MeCabのユーザオリジナル辞書の作り方と,その辞書をMeCabに登録する方法です
MeCabでオリジナル辞書を構築してみる
MeCabでオリジナル辞書を構築してみる
Nな人 -enunahito-
4月18日のエスキュービズム社内勉強会で使用した資料になります。
全文検索エンジンMroonga_エンジニア勉強会20140418
全文検索エンジンMroonga_エンジニア勉強会20140418
エンジニア勉強会 エスキュービズム
2011/12/15にお台場にて行われた第1回EMR勉強会で発表した資料です。
20111215_第1回EMR勉強会発表資料
20111215_第1回EMR勉強会発表資料
Kotaro Tsukui
11/12/15に行われたEMR勉強会で使ったスライドです #emrstudy_jp
クックパッドでのemr利用事例
クックパッドでのemr利用事例
Tatsuya Sasaki
2011-12-15 第一回 EMR勉強会発表資料
ソーシャルゲームのEMR活用事例
ソーシャルゲームのEMR活用事例
知教 本間
第3回Elasticsearch勉強会での発表資料です
MySQLユーザ視点での小さく始めるElasticsearch
MySQLユーザ視点での小さく始めるElasticsearch
Kentaro Yoshida
Groongaの今後への期待 全文検索エンジンGroongaユーザ勉強会@神戸
Groongaの今後への期待
Groongaの今後への期待
Naoya Murakami
MySQLは広く使われているRDBMSです。速いし、レプリケーションのノウハウもあるし、Web上にたくさんの情報もあるからいざというときも安心、というのがその理由でしょう。 そんなMySQLの弱点の1つがデフォルトでは日本語で全文検索できないことです。でも、日本語で全文検索したいし。。。どうしよう。 そんなあなたに最近の日本語の全文検索事情を紹介します。Solr?Elasticsearch?Groonga?PostgreSQLはどうやっているの?Mroonga?Sphinx? いろいろ考えると日本語で全文検索するときもMySQLを使うのがいいね!と思えてくるから不思議です。最近の日本語の全文検索事情を聞いて一緒に考えてみませんか?
いろいろ考えると日本語の全文検索もMySQLがいいね!
いろいろ考えると日本語の全文検索もMySQLがいいね!
Kouhei Sutou
Recomendados
MeCabのユーザオリジナル辞書の作り方と,その辞書をMeCabに登録する方法です
MeCabでオリジナル辞書を構築してみる
MeCabでオリジナル辞書を構築してみる
Nな人 -enunahito-
4月18日のエスキュービズム社内勉強会で使用した資料になります。
全文検索エンジンMroonga_エンジニア勉強会20140418
全文検索エンジンMroonga_エンジニア勉強会20140418
エンジニア勉強会 エスキュービズム
2011/12/15にお台場にて行われた第1回EMR勉強会で発表した資料です。
20111215_第1回EMR勉強会発表資料
20111215_第1回EMR勉強会発表資料
Kotaro Tsukui
11/12/15に行われたEMR勉強会で使ったスライドです #emrstudy_jp
クックパッドでのemr利用事例
クックパッドでのemr利用事例
Tatsuya Sasaki
2011-12-15 第一回 EMR勉強会発表資料
ソーシャルゲームのEMR活用事例
ソーシャルゲームのEMR活用事例
知教 本間
第3回Elasticsearch勉強会での発表資料です
MySQLユーザ視点での小さく始めるElasticsearch
MySQLユーザ視点での小さく始めるElasticsearch
Kentaro Yoshida
Groongaの今後への期待 全文検索エンジンGroongaユーザ勉強会@神戸
Groongaの今後への期待
Groongaの今後への期待
Naoya Murakami
MySQLは広く使われているRDBMSです。速いし、レプリケーションのノウハウもあるし、Web上にたくさんの情報もあるからいざというときも安心、というのがその理由でしょう。 そんなMySQLの弱点の1つがデフォルトでは日本語で全文検索できないことです。でも、日本語で全文検索したいし。。。どうしよう。 そんなあなたに最近の日本語の全文検索事情を紹介します。Solr?Elasticsearch?Groonga?PostgreSQLはどうやっているの?Mroonga?Sphinx? いろいろ考えると日本語で全文検索するときもMySQLを使うのがいいね!と思えてくるから不思議です。最近の日本語の全文検索事情を聞いて一緒に考えてみませんか?
いろいろ考えると日本語の全文検索もMySQLがいいね!
いろいろ考えると日本語の全文検索もMySQLがいいね!
Kouhei Sutou
2015年3月12日にヒカ☆ラボに登壇された 株式会社グリフォンの川村氏のスライド資料です。
ソーシャルアプリにおけるRedisの活用事例とトラブル事例
ソーシャルアプリにおけるRedisの活用事例とトラブル事例
leverages_event
「MySQL勉強会 in 大阪(第6回)」 http://atnd.org/events/49005 のLTの資料です。
Mroongaを使ったときの MySQLの制限との戦い
Mroongaを使ったときの MySQLの制限との戦い
Naoya Murakami
Classmethod主催 Developersui Meetup CM:道での発表資料。
CloudSearchによる全文検索 - CM:道 2014/08/01
CloudSearchによる全文検索 - CM:道 2014/08/01
Shuji Watanabe
Redis勉強会の資料です。2013年に初版をアップしました。2015年6月にRedis-Clusterの内容を追記して再アップを行っています。
Redis勉強会資料(2015/06 update)
Redis勉強会資料(2015/06 update)
Yuji Otani
ダブル配列の実装方法
ダブル配列の実装方法
Higashiyama Masahiko
SolrとElasticsearchに関して独自の観点で比較してまとめています。 (実際に比較検討が必要な場合は、ご自身で実施されるのが良いと思います)
SolrとElasticsearchを比べてみよう
SolrとElasticsearchを比べてみよう
Shinsuke Sugaya
2015/08/22 YAPC::Asia Tokyo 2015 Lightning Talk 2016/01/13 update about default_password_lifetime will be 0
MySQL 5.7の罠があなたを狙っている
MySQL 5.7の罠があなたを狙っている
yoku0825
These slides include many inappropriate graphs. If you want to tell the summary of the data correctly, you should avoid to use graphs in this presentation. They can mislead those who view them. In English, the title of presentaion is "24 slides including graphs that should not be absolutely drawn".
絶対に描いてはいけないグラフ入りスライド24枚
絶対に描いてはいけないグラフ入りスライド24枚
itoyan110
YAPC::Kansai presentation slide about h2o and mruby
H2O x mrubyで人はどれだけ幸せになれるのか
H2O x mrubyで人はどれだけ幸せになれるのか
Ichito Nagata
Más contenido relacionado
Destacado
2015年3月12日にヒカ☆ラボに登壇された 株式会社グリフォンの川村氏のスライド資料です。
ソーシャルアプリにおけるRedisの活用事例とトラブル事例
ソーシャルアプリにおけるRedisの活用事例とトラブル事例
leverages_event
「MySQL勉強会 in 大阪(第6回)」 http://atnd.org/events/49005 のLTの資料です。
Mroongaを使ったときの MySQLの制限との戦い
Mroongaを使ったときの MySQLの制限との戦い
Naoya Murakami
Classmethod主催 Developersui Meetup CM:道での発表資料。
CloudSearchによる全文検索 - CM:道 2014/08/01
CloudSearchによる全文検索 - CM:道 2014/08/01
Shuji Watanabe
Redis勉強会の資料です。2013年に初版をアップしました。2015年6月にRedis-Clusterの内容を追記して再アップを行っています。
Redis勉強会資料(2015/06 update)
Redis勉強会資料(2015/06 update)
Yuji Otani
ダブル配列の実装方法
ダブル配列の実装方法
Higashiyama Masahiko
SolrとElasticsearchに関して独自の観点で比較してまとめています。 (実際に比較検討が必要な場合は、ご自身で実施されるのが良いと思います)
SolrとElasticsearchを比べてみよう
SolrとElasticsearchを比べてみよう
Shinsuke Sugaya
2015/08/22 YAPC::Asia Tokyo 2015 Lightning Talk 2016/01/13 update about default_password_lifetime will be 0
MySQL 5.7の罠があなたを狙っている
MySQL 5.7の罠があなたを狙っている
yoku0825
These slides include many inappropriate graphs. If you want to tell the summary of the data correctly, you should avoid to use graphs in this presentation. They can mislead those who view them. In English, the title of presentaion is "24 slides including graphs that should not be absolutely drawn".
絶対に描いてはいけないグラフ入りスライド24枚
絶対に描いてはいけないグラフ入りスライド24枚
itoyan110
YAPC::Kansai presentation slide about h2o and mruby
H2O x mrubyで人はどれだけ幸せになれるのか
H2O x mrubyで人はどれだけ幸せになれるのか
Ichito Nagata
Destacado
(9)
ソーシャルアプリにおけるRedisの活用事例とトラブル事例
ソーシャルアプリにおけるRedisの活用事例とトラブル事例
Mroongaを使ったときの MySQLの制限との戦い
Mroongaを使ったときの MySQLの制限との戦い
CloudSearchによる全文検索 - CM:道 2014/08/01
CloudSearchによる全文検索 - CM:道 2014/08/01
Redis勉強会資料(2015/06 update)
Redis勉強会資料(2015/06 update)
ダブル配列の実装方法
ダブル配列の実装方法
SolrとElasticsearchを比べてみよう
SolrとElasticsearchを比べてみよう
MySQL 5.7の罠があなたを狙っている
MySQL 5.7の罠があなたを狙っている
絶対に描いてはいけないグラフ入りスライド24枚
絶対に描いてはいけないグラフ入りスライド24枚
H2O x mrubyで人はどれだけ幸せになれるのか
H2O x mrubyで人はどれだけ幸せになれるのか
Groongaでのタグ検索と表記揺れとの戦い
1.
���������������������� ����������������������� Groongaでのタグ検索と 表記揺れとの戦い ����� ������������������� ����������
2.
���������������������� ����������������������� 自⼰紹介 ��������������������✓ ����������������������������� �������������������������� ✓ ����������������������������������� ��������������������������✓ �����������������✓ ������������������������� ���������������� �������������������������������� ✓ ✓
3.
���������������������� ����������������������� ����������������������������� ����������������������� ✓ ������������������������✓ �������������������������� ����������������� ������������������������������������ ���������� ✓ �����������������������✓ ������������������� ��������������������������������������� ������������������������ ✓ ✓
4.
���������������������� ����������������������� Groongaのタグ検索を使っているとろ ������������������� �����������������������������✓ ✓ ����������������������� ������������������������✓ ✓ ������������������� ��������������������� �������������� ✓ ✓
5.
���������������������� ����������������������� Groongaのタグ検索のいいところ ���������✓ ������������������������ ��������������������������������� ����������� ✓ ✓ ������ ����������� �
������ � ������ ���� ��������� � ��� � ���
6.
���������������������� ����������������������� Groongaのタグ検索のいいところ ���������� �������������✓ �����������������✓ �����������������✓ ✓ ������ ����������� �
���������������� � ��������
7.
���������������������� ����������������������� Groongaのタグ検索のいいところ ����������������������� �������� ���������������������� ��������������������� ✓ ������������������✓ ✓ ���� ���������
��� ��������� ����� ����������� � ��� ������ ��� � ��� ��������� ��
8.
���������������������� ����������������������� タグ検索で困ったこと ����������� ������������������������� ��� ✓ ����������������� �����������������������✓ ✓
9.
���������������������� ����������������������� KABUSHIKI KAISHA
10.
���������������������� ����������������������� KABUSHIKI KAISYA
11.
���������������������� ����������������������� KABUSHIKI GAISHA
12.
���������������������� ����������������������� KABUSHIKI KAAISHA
13.
���������������������� ����������������������� KABSHIKI KAISHA
14.
���������������������� ����������������������� KABUHSIKI KAISHA
15.
���������������������� ����������������������� KABUSHIKI DAISHA
16.
���������������������� ����������������������� KABUSHIKI KISHA
17.
���������������������� ����������������������� KABUSHIKI KEISHA
18.
���������������������� ����������������������� KABUSHIKI HAISHA
19.
���������������������� ����������������������� 負けては いけませ ん
20.
���������������������� ����������������������� タグの表記揺れで問題になること ����������� ����������������������������� ����������������������������� ��������������� ✓ ��������������������������� ����������������������������� ✓ ✓ �������������� ��������������������������������� ������� ✓ ✓
21.
���������������������� ����������������������� 表記揺れの主な種類 ������������� �������������✓ ✓ ��������� ������������������✓ ✓ ����������������� ����������������✓ ✓ ����������✓ 誤字/脱字(Typo)✓
22.
���������������������� ����������������������� 表記揺れ(Typo)の単語を抽出するプラグイ ン gronoga-term-similar ����������������������� �������������������������������������������� ✓ �������������������� ������������� ✓ ����������������������� ����� ✓
23.
���������������������� ����������������������� 表記揺れ(Typo)の検出⽅法 ���������������������� ���������������������� � ��������������✓ ����������������������������������������������✓ ✓ ���������������������� ���������� ��������������������✓ ���������✓ ✓
24.
���������������������� ����������������������� Patricia Trieによる前⽅⼀致検索 ���������������������� ���������������������� ������������������������ �������� ✓ ✓ Da����������Da��������Da����������������������✓ ���������� ������������������������� ✓
25.
���������������������� ����������������������� 編集距離(Levenshtein distance) ����������������������✓ ����������������������� ������������ ✓ ��������������t��������✓ ��������������a�������✓ ��������������_�������✓ ���������������������a���_�������✓
26.
���������������������� ����������������������� KABUSHIKI KAISHA
27.
���������������������� ����������������������� KABUHSIKI KAISHA
28.
���������������������� ����������������������� KABUSHIKI DAISHA
29.
���������������������� ����������������������� Damerau-Levenshtein distance ����������������������� ������������������������� � ✓ ✓ ���������������������� �������������������� ✓ ��������������✓ ���������������������na���������✓
30.
���������������������� ����������������������� qwerty配置のキーボード距離 �����������������������✓ ���������������������� ��������������������� ✓ ���������������������� �������������� ✓ ����������������������������we�������✓ �����������������������������e�����o�✓ �������������������������� ������ ✓
31.
���������������������� ����������������������� 多くの⽂書に出現しているタグを選択 (optional) ���������������������� ���������������� ✓ ������������������������ ������������������� ���������������������������������� ����������������� ✓ ����������� Database =
DF:200/Distance:11 ��������������������������� ��������������������������� ✓
32.
���������������������� ����������������������� 表記揺れ(Typo)の検出⽅法 �������������������������✓ ������������������������������✓ ������������������������������������✓ �����������������������✓ ��������������������✓ ���������������������� ���������������������� Typoの修正候補ぽいのが抽出される✓ ✓
33.
���������������������� ����������������������� 抽出例(DFオプションなし1) ���������������������������������������� � ����� ��������������������� �������������������� ��������������������� ���������������������� ��������������������� ��������������������� ����� � �������������������������✓
34.
���������������������� ����������������������� 抽出例(DFオプションなし2) ���������������������������������������� � ����� ������������������� ������������������� ������������������ �������������������� ����� � ������������������� ��������������� ✓
35.
���������������������� ����������������������� 抽出例(DFオプションあり) ��������������������������������������������������������� � ����� ���������������������� ����������������� ������������������� ������������������ ����� � ��������������������������� �������������������������� ✓
36.
���������������������� ����������������������� タグの表記揺れで問題になること まとめてグループ集計できない ��������������������������������� ������� ✓ ✓ ������������✓ ���������������� �����������������������������✓ �������������������✓ ✓
37.
���������������������� ����������������������� 投⼊タグを書き換えるプラグイン gronoga-tag-synonym ��������������������� ������������������������������������������� ✓ ������������������������� ���������������������������������✓ ✓ ������������������� ���������������������������✓ ������������������������✓ ✓ Typoのあるタグが集約される✓
38.
���������������������� ����������������������� 投⼊タグを書き換えるプラグイン gronoga-tag-synonym ������������������������������������������� ����������������� ��������������������������������������������� ������������������ ������������������������������������������������������ ����������������������������������������������������� �������������������������������������������������������������������� � ����� ������� ������������������ ������������������������������ �������� ������� ������������������ ������������������������������ ������� ����� ��� �
39.
���������������������� ����������������������� 投⼊タグを書き換えるプラグイン gronoga-tag-synonym ��������������������� ����������������������������� ����������������������������� ���������� ✓ ��������������������������������� ������� ✓ ✓ ���������������������� ���������������� ������������������������� ����������������������������� ✓ ✓
40.
���������������������� ����������������������� 投⼊タグを書き換えるプラグイン gronoga-tag-synonym ����������������� ���������������� �����������������������✓ ✓ ����������������� ���������������� ����������� ✓ �������������✓
41.
���������������������� ����������������������� TokenFilterTypoトークンフィルター gronoga-term-similar ������������������������� �������������������������� ���� ✓ ����������������������������� ��� ������������������� ��������� ✓ ������������������������� ������������������� ✓
42.
���������������������� ����������������������� TokenFilterTypoトークンフィルター gronoga-term-similar ������������������ �������������������������������������������� ������������������������������������������������������� ��� ������������������������������������� ���
43.
���������������������� ����������������������� Groongaのいいところ ����������������✓ ���������������������✓
44.
���������������������� ����������������������� タグの表記揺れでもうひとつ解決したいこと あいまい検索 ������������������� �������������������������自動� ������������ ������✓ ✓ ���������������������� ���������������������� �������� ✓ ���������������������� ������������� ✓
45.
���������������������� ����������������������� Thank you for your attension
46.
���������������������� ����������������������� Thank you for your attention
Descargar ahora