機械学習に欠かせないアノテーション！アノテーションあるあるを添えて…アノテーションプロジェクトを担当している現場からリアルな声をお届けします。

1. 「アノテーション！！」
アノテーションあるあるを添えて・・
機械学習に欠かせない
２０１８/１０/２２
株式会社Job-Hub サポートグループ 大池牧子

3. 個人それぞれの多様な生き方、働き方をサポートする
全国のフリーランスのワーカーと
お仕事を依頼したいクライアントを繋ぐ
クラウドソーシングサイトです。
h t t p s : / / J o b h u b . j p

4. 従来型クラウドソーシングにマネージメントをプラス
個別のワーカーとの契約ではなく、株式会社Job-Hubとの業務委託契約によるサービスです。
業務は全国のワーカーが担当しますが、進捗や品質など業務管理は、
当社社員のプロジェクトマネージャーが責任を持って実施します。
アウトソーシングとは

5. 様々な業務をサポートします。

6. アノテーション とは？

7. 画像やテキストなどに対して、特定のルールに
従ってメタデータを付与する作業。
人工知能モデルの作成、機械学習などを実行する
際に必要となる作業プロセス。
画像 音声 テキスト
アノテーションとは？

8. たとえば・・・
ドラレコ画像のアノテーション

9. 自動車
自転車
自動車
作業事例
自動車の教師付け作業
※矩形
矩形から複数の頂点へ進化しており、
より複雑な情報が必要とされている
歩道
車道
車道と歩道の教師付け作業
※フリーハンド

10. 車、人、歩道、車道、路上にあるもの、室内の人、農作物、傷、スポー
ツ選手、ボール、審判、看板、信号機、停止線、医療系データ…
囲むものの多様化・・・
ルール多様化・・・
隠れているものを想定して囲むのか、見切れていたらどうするか、どこ
まで拡大して囲むか、固まっているものはどうするか、AなのかBなの
かの判断軸、そもそも判別が人によってわかれる

11. システム・仕組みでなるべく簡素化
初回作業でルール間違いをブロック
マニュアルでのルールの落とし込み
迷った時の事例集
トリプル多数決
・
・
・
対策

12. あらゆる年代のたくさんの
人の声を集める
ある発話のタイミングでの
アノテーション
音声

13. テキスト
会話など
テキストデータを集める
ABCDEFGHIJKLMNOPQRS
TUVWXYZABCDEFGHIJKL
MNOPQRSTUVWXYZABCD
EFGHIJKLMNOPQRSTUVW
XYZABCDEFGHIJKLMNOP
QRSTUVWXYZ
決められた単語に
印をつける

14. 体制
営業 PM
SV SV
全国テレワーカー
業務理解品質
チェック
案件に
より増減
地方Lab

15. 実施パターン
メンバーアサインのみ
最短１日後から開始
簡易マニュアル
最短1日後から開始
例）2,000枚3日後納品
• 要件ヒアリング
• メンバーアサイン
• マニュアル作成
• 初回少量アノテ実施
• 大量アノテ実施
• 要件ヒアリング
• アノテツール調整
• メンバーアサイン
• マニュアル作成
• 初回少量アノテ実施
• 大量アノテ実施
お客様ツール 自社ツール
超
特
急
通
常
とにかく
早く
しっかり
ルール
決めて

16. アノテーション あるある
ワーカーさんに
聞いてみました

17. 業務が終わっても、
歩きながら・・・
車の運転をしながら・・・
テレビを見ながら・・・
囲み対象をいつの間にか
頭の中で囲んでしまう

18. 信号の種類を気にするようになる
そして、珍しいのを見つけると写メ

19. 自動
割り当て

20. やたらと囲み対象が多い画像を
引いてしまった時は、
一度タブを閉じて休憩し、
覚悟を決めてから作業を再開する。
20

21. 「よし、やるぞ！」と
気合を入れる

22. 「あたし何やってるんだろう」と
ふと疑問に思う。
22

23. 苦労が報われるとき

24. すべての作業が終わったとき

25. このあいだのお仕事が
役立っているかも！？
と思えた瞬間
もしや、この新製品は…

27. マスター タイトルの
書式設定
マ ス タ ー サ ブ タ イ ト ル の 書 式 設 定
ご清聴ありがとうございました