みなさん クイズお疲れ様でした

「ポジティブ」「ネガティブ」「疑問や質問」のどれでアノテーションをしましたか？

それでは 徳井さんと深田さんの回答を聞いてみましょう

私はすごく悩みましたが…「疑問や質問」にしました

「新しい味だなって思った」が 「ネガティブ」な意見のような印象を受けたんですが 最後に問いかけをしているので「疑問や質問」にしました

俺も悩んだんだけど「ポジティブ」にしたよ

最後に問いかけをしていたから「疑問や質問」かなって思ったんだけど「新しい味だなって思った」が 俺はポジティブな印象を受けたんだよな

「今までにない新しい味で感動！」って感じでさ

二人とも意見が分かれましたね

もしかすると 最後に問いかけをしていたので 迷わず「疑問や質問」と思った人もいるかもしれませんね

今回の場合も「ルール」があれば解決するのかな？

はい 何に対してのアノテーションでも「ルール」の確認は必ず必要になります

ですが今回の場合は ルールがあったとしても 人それぞれの感性や価値観などにより どうとらえるかが異なるため アノテーターによって回答が異なることが予想されます

このような場合は アノテーター同士で話し合いを行ったり 多数決を取るなどで解決することが必要になりますよ

なるほど じゃあ今回の場合は 私と徳井くんで話し合って正解ラベルを決めればいいってことですね

徳井くんはどう思う？

「新しい味だなって思った」は 俺みたいに「ポジティブ」に受け取る人もいれば 深田さんみたいに「ネガティブ」に受け取る人もいる文章だって 深田さんの意見を聞いて気づいたんだよな

「ポジティブ」「ネガティブ」では意見が分かれたけど「質問や疑問」にもとらえられるって部分は二人の意見が一致しているから 「質問や疑問」の正解ラベルがいいんじゃないかな

私も徳井くんと同じ意見だから この文章は「疑問や質問」でアノテーションするね

はい 「疑問や質問」で良いと思いますよ

明確な正解がない文章のため 二人が話し合って出した結果が「正解」になります

それでは次のスライドでは「音声」のアノテーションについて解説します