須多先生

みなさん こんにちは
本日も一緒に人工知能について学びましょう

須多先生

前回は オンラインショップに届くコメントやダイレクトメールを「ポジティブ」「ネガティブ」「問い合わせ」に分類する方法を考えましたね

徳井 天

最初はPythonの「if文」での条件分岐を使えばいいと思ったんだ
それぞれのキーワードの特徴を探して 「うれしい」なら「ポジティブ」 「残念」なら「ネガティブ」 のように探していけばいいんじゃないかって

深田 あい

ただその方法だと それぞれのキーワードを大量に用意するのが大変だと気づいて 正解ラベルを付ける「機械学習」の「教師あり学習」で問題解決をすることにしたんですよね

徳井 天

「ポジティブな意見」「ネガティブな意見」のように コメントやダイレクトメールに正解ラベルを付ける作業をしたんだよな
えっとその名称は…アノ…アノ…

須多先生

アノテーションのことですね
アノテーションは人間が行う作業ですので その分 量が多いと時間がかかり大変ですが 芽萌里先生 目田さん 広伝さんに手伝ってもらったおかげで 無事全てのアノテーションを終えることができましたね

深田 あい

みんなに手伝ってもらって本当に助かったよね
でも ちょっと気になることもあったんだよね…

徳井 天

気になること？何かあったのか？

深田 あい

アノテーションを終えた コメントやダイレクトメールを改めて確認していたんだけど この正解ラベルで本当に合ってるのかな？と思うものがいくつかあったんだよね

深田 あい

例えば「割引が適用されていないことに気付きました 説明を求めます」
この意見は 私は「ネガティブな意見」だと思うんだけど 「問い合わせ」のラベルが付いていたんだよね

徳井 天

あ それ俺がアノテーションしたコメントだ
「説明を求めます」だから 「問い合わせ」に該当すると思ったんだけど 言われてみれば「ネガティブな意見」な気もするな…

深田 あい

徳井くんの話を聞いたら 「問い合わせ」に該当するような気もしてきたな…
どちらが正解なんだろう？（ユーザー名）さんはどう思う？

須多先生

これはラベル付けに悩むコメントですね
ですが 「本来適用されるはずの割引が適用されていない」ことに対して「説明を求める」とあるので 「不満」と受け止めることができ どちらかと言えば「ネガティブな意見」に該当する可能性が高いと思いますよ

徳井 天

確かに 改めて確認してみると「ネガティブな意見」に近いな
データの数が多くて 内容をしっかり確認しないまま「説明を求めます」の部分だけしか読まずにラベル付けてたかもしれないな…

須多先生

アノテーションをする人 通称アノテーターによって 解釈が異なることはよくあります

須多先生

ですが間違ったラベル付けは 教師あり学習のAIの性能を大きく左右することになるので しっかり内容を確認してラベル付けを行うことが大切ですよ

深田 あい

作業後半は 私も同じように 内容をしっかり確認しないままラベル付けしていたかもしれないです…

徳井 天

データ件数が多かったとはいえ 大事な作業だったんだからしっかりやらなきゃいけなかったな
アノテーションって 思っていたより難しいんだな

須多先生

今回行うクイズ形式のアクティビティでは 以前行った「文章」以外にも 「画像」や「音声」のアノテーションにも挑戦してもらいますよ

徳井 天

画像は手書きの数字のラベル付けの時にもやったことがあったけど 音声は初めてだよな
どうやって分類するのか 楽しみだな！

深田 あい

アノテーションの大切さと難しさを改めて確認できるよう 頑張ります！

須多先生

それでは スライドとクイズ形式のアクティビティで アノテーションについて理解を深めていきましょう