著者
髙橋 寛治 竹野 峻輔 山本 和英
出版者
一般社団法人 人工知能学会
雑誌
人工知能学会論文誌 (ISSN:13460714)
巻号頁・発行日
vol.32, no.5, pp.D-H33_1-4, 2017-09-01 (Released:2017-09-01)
参考文献数
7

This paper presents a novel metric for evaluating stability of machine translation system. A stable system indicates that it keeps almost the same outputs given the inputs with slight changes. In this paper, we propose a stability metric by exploiting TER metric for evaluating the differences between the two texts. We have built an evaluation data set, and demonstrate that a neural-based method is unstable rather than a statistical-based method, while the former outperforms the latter.

言及状況

外部データベース (DOI)

Twitter (5 users, 5 posts, 11 favorites)

人工知能学会論文誌に掲載されました。 どうもありがとうございます。 https://t.co/IQMERRsvQZ
本日下記の論文が人工知能学会論文誌に掲載されましたのでご報告します。昨年度修了生の高橋君と竹野君が一緒に行った研究成果です。 機械翻訳システムの出力安定性の評価 https://t.co/FxPVdkK9Fw

収集済み URL リスト