- 著者
-
石川 大介
栗山 和子
関 洋平
神門 典子
- 出版者
- 情報処理学会
- 雑誌
- 研究報告自然言語処理(NL) (ISSN:09196072)
- 巻号頁・発行日
- vol.2010, no.8, pp.1-7, 2010-01-21
- 参考文献数
- 12
Q&Aサイトにおけるベストアンサーを計算機が推定可能か検証するために,人間の被験者によるベストアンサー推定実験を行った.ベストアンサー推定実験にはYahoo!知恵袋データを利用し,「恋愛相談」と「パソコン」のカテゴリーから各50問を使用した.被験者二人による推定結果は,「恋愛相談」では正解率50%と52%(ランダム推定結果は34%),「パソコン」では正解率62%と58%(ランダム推定結果は38%) であり,いずれもランダム推定結果を上回った.また,被験者二人のκ係数は,「恋愛相談」では0.454(moderate),「パソコン」では0.613(substantial) であった.In order to verify whether a computer can estimate the best answer on a Q&A site, a best-answer estimation experiment was carried out with human examinees. The Yahoo! Chiebukuro data was used for the best-answer estimation experiment, and 50 questions each were used for the categories of"Consultation of love"and"Personal computer."The estimated result by two examinees for the correct answer rate was 50% and 52% (randomly estimated result: 34%) in "Consultation of love" and 62% and 58% (randomly estimated result: 38%) in "Personal computer"; therefore, each estimated result exceeded the randomly estimated result. Moreover, the kappa coefficient of the two examinees was 0.454 (moderate) in "Consultation of love" and 0.613 (substantial) in "Personal computer."