SlideShare a Scribd company logo
1 of 15
Download to read offline
長岡技術科学大学 電気系
堀江 将隆,山本和英
QAサイトにおける
専門用語を用いた
最適な回答者提示
背景
QAサイトで得られた回答でどれが正
しいのか判断できない
ベストアンサーが得られた質問でも
質問者は満足していない場合がある
①
質問者に対し、最も満足できるような回答を
投稿できる回答者を提示
背景補足
? ?
質問 質問
???
A A A どの回答が良い
か判断できない
A
最適な
回答者
× ○
最適な回答者の定義
対象の質問に関する知識を多く持っている
ユーザの回答は信頼性が高い
最適な回答者とは
知識を多く持っているユーザ
②
知識とは特定の分野でのみ使用され
るような情報
知識の表現方法
内容語
単語単体で知識として意味を持たない
ものがある
専門用語
単語単体で分野を想像できる
③
知識として専門用語を用いる
提案手法の全体図
質問文
専門用語抽出
回答履歴から
専門用語検索
専門用語数で
ユーザをランキング
専門用語
リスト
最適な回答者
④
ユーザの
回答履歴
入力
出力
入力の質問文
は含めない
PCをリカバリしたいのですが、プロダクトキーが書か
れた冊子が見当たりません。プロダクトキーの入力な
しでリカバリできないものでしょうか?WinXPメーカー
はhpです。ご教示、よろしくお願いします。
専門用語抽出
PC,リカバリ,プロダクトキー,WinXP,hp
質問文
⑤
PC,リカバリ,プロダクト,キー,書かれ,冊子,見当,入
力,なし,でき,WinXP,メーカー,hp,教示,お願い
内容語
専門用語
専門用語検索 ⑥
1.各回答ユーザの回答履歴を参照
  回答履歴とは、ユーザが過去に回答した質問文と
  それに対する回答文とのペアの集合
2.専門用語の異なり数をカウント
3.異なり数を各ユーザのスコアとする
4.スコアが最大のユーザを出力
実験
実験データ
Yahoo!知恵袋の「インターネット、PCと家電」
回答者が3人のみの質問30件
評価方法
ベストアンサーを回答したユーザを正解
実験
専門用語と内容語を用いて比較
⑦
実験結果と考察 ⑧
内容語 専門用語
正解率
(正解/質問数)
43.3%
(13/30)
43.3%
(13/30)
各手法でのみ正解が4件ずつあった
● 内容語で「当初」「イマイチ」等の出現の
差で正解となっているものがあった
知識の数が多くても正解率が変わらない
専門用語に限定する意味はある
結果の詳細 ⑨
過去の回答数が平均の1割に満たないBAユー
ザであるものは4件(平均回答件数は1920件)
● この手法では正解するのが難しい
BAユーザの回答数ランキングごとの正解率
1位:6/11、2位:3/9、3位:4/10
● 回答数には依存しない
出力ユーザの回答が不正解だが、
十分に満足できると考えた回答が5件
結果の詳細 ⑩
内容語 専門用語
知識の
平均語数 36語 10語
同スコアによる
複数ユーザ出力 4件 7件
専門用語の場合、知識の語数が少ない
●
各回答者のスコアが等しくなり、出力する
ユーザが複数になる
専門用語を拡張して知識の量を増やす
改善策として
専門用語の拡張方法
Yahoo!APIの関連検索ワード検索を使用
入力したワードとよく組み合わせて検索されるワード
各専門用語1つに対し、最大で50語を収集
⑪
「メモリ」の関連検索ワードの例
「PC」の関連検索ワードの例
メモリ増設,仮想メモリ,バッファロー,USBメモリ,
物理メモリ,増設メモリ,ガイアメモリ,エルピーダメ
モリ,フラッシュメモリ,パソコン
DEPOT,PCゲーム,PCボンバー,自作PC,PC
工房,100円PC,Watch,タブレットpc,pc
マックス,モバイルPC
拡張語の実験結果と考察
提示するユーザを一人に絞れた
拡張により5件の質問が改善
⑫
知識が増えたことにより、質問に適したユーザ
を選出しやすくなった
正解率
同スコアによる
複数ユーザ出力
専門用語
拡張
40.0%
(12/30) 0件
まとめ
質問に対し最適な回答者の提示手法を提案
● 最適なユーザを探す手がかりとして
専門用語を用いた
結果は内容語を用いたときと同じ正解率
● 同率1位で複数のユーザを出力してしまう
専門用語を拡張することで正解率を維持しつ
つ、ユーザを一人に絞れた
⑬

More Related Content

More from 長岡技術科学大学 自然言語処理研究室

More from 長岡技術科学大学 自然言語処理研究室 (20)

Selecting Proper Lexical Paraphrase for Children
Selecting Proper Lexical Paraphrase for ChildrenSelecting Proper Lexical Paraphrase for Children
Selecting Proper Lexical Paraphrase for Children
 
Automatic Selection of Predicates for Common Sense Knowledge Expression
Automatic Selection of Predicates for Common Sense Knowledge ExpressionAutomatic Selection of Predicates for Common Sense Knowledge Expression
Automatic Selection of Predicates for Common Sense Knowledge Expression
 
用言等換言辞書を用いた換言結果の考察
用言等換言辞書を用いた換言結果の考察用言等換言辞書を用いた換言結果の考察
用言等換言辞書を用いた換言結果の考察
 
用言等換言辞書の構築
用言等換言辞書の構築用言等換言辞書の構築
用言等換言辞書の構築
 
質問意図によるQAサイト質問文の自動分類
質問意図によるQAサイト質問文の自動分類質問意図によるQAサイト質問文の自動分類
質問意図によるQAサイト質問文の自動分類
 
役所からの公的文書に対する「やさしい日本語」への変換システムの構築
役所からの公的文書に対する「やさしい日本語」への変換システムの構築役所からの公的文書に対する「やさしい日本語」への変換システムの構築
役所からの公的文書に対する「やさしい日本語」への変換システムの構築
 
対訳コーパスから生成したワードグラフによる部分的機械翻訳
対訳コーパスから生成したワードグラフによる部分的機械翻訳対訳コーパスから生成したワードグラフによる部分的機械翻訳
対訳コーパスから生成したワードグラフによる部分的機械翻訳
 
用言等換言辞書を人手で作りました
用言等換言辞書を人手で作りました用言等換言辞書を人手で作りました
用言等換言辞書を人手で作りました
 
文字列の出現頻度情報を用いた分かち書き単位の自動取得
文字列の出現頻度情報を用いた分かち書き単位の自動取得文字列の出現頻度情報を用いた分かち書き単位の自動取得
文字列の出現頻度情報を用いた分かち書き単位の自動取得
 
「やさしい日本語」変換システムの試作
「やさしい日本語」変換システムの試作「やさしい日本語」変換システムの試作
「やさしい日本語」変換システムの試作
 
常識表現となり得る用言の自動選定の検討
常識表現となり得る用言の自動選定の検討常識表現となり得る用言の自動選定の検討
常識表現となり得る用言の自動選定の検討
 
動詞意味類型の曖昧性解消に向けた格フレーム情報との関連調査
動詞意味類型の曖昧性解消に向けた格フレーム情報との関連調査動詞意味類型の曖昧性解消に向けた格フレーム情報との関連調査
動詞意味類型の曖昧性解消に向けた格フレーム情報との関連調査
 
二格深層格の定量的分析
二格深層格の定量的分析二格深層格の定量的分析
二格深層格の定量的分析
 
大規模常識知識ベース構築のための常識表現の自動獲得
大規模常識知識ベース構築のための常識表現の自動獲得大規模常識知識ベース構築のための常識表現の自動獲得
大規模常識知識ベース構築のための常識表現の自動獲得
 
文脈の多様性に基づく名詞換言の提案
文脈の多様性に基づく名詞換言の提案文脈の多様性に基づく名詞換言の提案
文脈の多様性に基づく名詞換言の提案
 
保険関連文書を対象とした文章校正支援のための変換誤り検出
保険関連文書を対象とした文章校正支援のための変換誤り検出保険関連文書を対象とした文章校正支援のための変換誤り検出
保険関連文書を対象とした文章校正支援のための変換誤り検出
 
Developing User-friendly and Customizable Text Analyzer
Developing User-friendly and Customizable Text AnalyzerDeveloping User-friendly and Customizable Text Analyzer
Developing User-friendly and Customizable Text Analyzer
 
普通名詞換言辞書の構築
普通名詞換言辞書の構築普通名詞換言辞書の構築
普通名詞換言辞書の構築
 
大規模常識知識ベース構築のための常識表現の自動獲得
大規模常識知識ベース構築のための常識表現の自動獲得大規模常識知識ベース構築のための常識表現の自動獲得
大規模常識知識ベース構築のための常識表現の自動獲得
 
普通名詞換言辞書の構築
普通名詞換言辞書の構築普通名詞換言辞書の構築
普通名詞換言辞書の構築
 

Recently uploaded

Recently uploaded (11)

LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
LoRaWANスマート距離検出センサー  DS20L  カタログ  LiDARデバイスLoRaWANスマート距離検出センサー  DS20L  カタログ  LiDARデバイス
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
 
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
 
LoRaWAN無位置ロープ型水漏れセンサー WL03A-LB/LSカタログ ファイル
LoRaWAN無位置ロープ型水漏れセンサー WL03A-LB/LSカタログ ファイルLoRaWAN無位置ロープ型水漏れセンサー WL03A-LB/LSカタログ ファイル
LoRaWAN無位置ロープ型水漏れセンサー WL03A-LB/LSカタログ ファイル
 
Utilizing Ballerina for Cloud Native Integrations
Utilizing Ballerina for Cloud Native IntegrationsUtilizing Ballerina for Cloud Native Integrations
Utilizing Ballerina for Cloud Native Integrations
 
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
 
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
 
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
 
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
 
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
 
新人研修 後半 2024/04/26の勉強会で発表されたものです。
新人研修 後半        2024/04/26の勉強会で発表されたものです。新人研修 後半        2024/04/26の勉強会で発表されたものです。
新人研修 後半 2024/04/26の勉強会で発表されたものです。
 
LoRaWAN無位置ロープ式水漏れセンサーWL03A 日本語マニュアル
LoRaWAN無位置ロープ式水漏れセンサーWL03A 日本語マニュアルLoRaWAN無位置ロープ式水漏れセンサーWL03A 日本語マニュアル
LoRaWAN無位置ロープ式水漏れセンサーWL03A 日本語マニュアル
 

QAサイトにおける専門用語を用いた最適な回答者提示