Submit Search
Upload
ZENKEI AI FORUM 2020/01/31
•
Download as PPTX, PDF
•
0 likes
•
1,056 views
Kengo Ichiki
Follow
2020年1月31日、金沢で開催の「ZENKEI AI FORUM」での、わたしの発表のスライドです。 https://www.zenkei.com/ai-seminar/
Read less
Read more
Technology
Report
Share
Report
Share
1 of 81
Download now
Recommended
ZENKEI AI FORUM 2020/03/25 ライブ(市來健吾)
ZENKEI AI FORUM 2020/03/25 ライブ(市來健吾)
Kengo Ichiki
ZENKEI AI FORUM 2019 #3
ZENKEI AI FORUM 2019 #3
Kengo Ichiki
ZENKEI AI FORUM 2019 #2
ZENKEI AI FORUM 2019 #2
Kengo Ichiki
Agileツール適合化分科会(第5回)議事録
Agileツール適合化分科会(第5回)議事録
masanori kataoka
Amazon SageMaker JumpStart
Amazon SageMaker JumpStart
西岡 賢一郎
AutoGluonではじめるAutoML
AutoGluonではじめるAutoML
西岡 賢一郎
オブラブ2008忘年会 RT
オブラブ2008忘年会 RT
Takeshi Kakeda
ZENKEI AI FORUM 2019 #5
ZENKEI AI FORUM 2019 #5
Kengo Ichiki
Recommended
ZENKEI AI FORUM 2020/03/25 ライブ(市來健吾)
ZENKEI AI FORUM 2020/03/25 ライブ(市來健吾)
Kengo Ichiki
ZENKEI AI FORUM 2019 #3
ZENKEI AI FORUM 2019 #3
Kengo Ichiki
ZENKEI AI FORUM 2019 #2
ZENKEI AI FORUM 2019 #2
Kengo Ichiki
Agileツール適合化分科会(第5回)議事録
Agileツール適合化分科会(第5回)議事録
masanori kataoka
Amazon SageMaker JumpStart
Amazon SageMaker JumpStart
西岡 賢一郎
AutoGluonではじめるAutoML
AutoGluonではじめるAutoML
西岡 賢一郎
オブラブ2008忘年会 RT
オブラブ2008忘年会 RT
Takeshi Kakeda
ZENKEI AI FORUM 2019 #5
ZENKEI AI FORUM 2019 #5
Kengo Ichiki
東京研修プログラム
東京研修プログラム
Jun Harada
Android IoTとプログラミング教育
Android IoTとプログラミング教育
Kenichi Yoshida
Microsoft Teamsのライブイベントによるオンライン勉強会 -.NETラボオンライン勉強会の舞台裏-
Microsoft Teamsのライブイベントによるオンライン勉強会 -.NETラボオンライン勉強会の舞台裏-
Tomokazu Kizawa
ZENKEI AI FORUM 2019 #7
ZENKEI AI FORUM 2019 #7
Kengo Ichiki
勉強会・コミュニティ運営について語ろう Documentary of .NETラボ
勉強会・コミュニティ運営について語ろう Documentary of .NETラボ
Tomokazu Kizawa
デザイナーズハック 008 定例MTG テレビUIの研究
デザイナーズハック 008 定例MTG テレビUIの研究
Chihiro Tomita
八子クラウド座談会 当日討議メモ付き資料 20180721
八子クラウド座談会 当日討議メモ付き資料 20180721
知礼 八子
20220921_京都のIT業界団体が取り組む地元のDX推進サポート.pdf
20220921_京都のIT業界団体が取り組む地元のDX推進サポート.pdf
KYOSOPRAS
座談会資料(討議メモ付き) 20170225
座談会資料(討議メモ付き) 20170225
知礼 八子
座談会資料(趣旨説明資料) 20161022
座談会資料(趣旨説明資料) 20161022
知礼 八子
座談会(趣旨説明資料) 20160417
座談会(趣旨説明資料) 20160417
知礼 八子
Notes festa 2015 iot時代におけるnotes domino
Notes festa 2015 iot時代におけるnotes domino
賢次 海老原
東大大学院 戦略ソフトウェア特論2021「ロボットで世界を計算可能にする」海野裕也
東大大学院 戦略ソフトウェア特論2021「ロボットで世界を計算可能にする」海野裕也
Preferred Networks
Bot Builder V4 SDK + QnA Maker / LUIS
Bot Builder V4 SDK + QnA Maker / LUIS
Yoshitaka Seo
座談会資料(趣旨説明資料) 20161117
座談会資料(趣旨説明資料) 20161117
知礼 八子
PIT_seisaku2023.pptx
PIT_seisaku2023.pptx
ssuser895b97
IETFの道しるべ-IETFの歩き方-20230124.pdf
IETFの道しるべ-IETFの歩き方-20230124.pdf
Shoichi Sakane
Webを支える組み込み技術
Webを支える組み込み技術
Yuji Chiya
20100828 code4 lib_japan_事業説明(全事業)
20100828 code4 lib_japan_事業説明(全事業)
Code4Lib JAPAN
いまさら聞けない機械学習のキホン
いまさら聞けない機械学習のキホン
dsuke Takaoka
ZENKEI AI FORUM 2020/07/29 ZOOM ライブ(市來健吾)
ZENKEI AI FORUM 2020/07/29 ZOOM ライブ(市來健吾)
Kengo Ichiki
ZENKEI AI FORUM 2019/12/24
ZENKEI AI FORUM 2019/12/24
Kengo Ichiki
More Related Content
Similar to ZENKEI AI FORUM 2020/01/31
東京研修プログラム
東京研修プログラム
Jun Harada
Android IoTとプログラミング教育
Android IoTとプログラミング教育
Kenichi Yoshida
Microsoft Teamsのライブイベントによるオンライン勉強会 -.NETラボオンライン勉強会の舞台裏-
Microsoft Teamsのライブイベントによるオンライン勉強会 -.NETラボオンライン勉強会の舞台裏-
Tomokazu Kizawa
ZENKEI AI FORUM 2019 #7
ZENKEI AI FORUM 2019 #7
Kengo Ichiki
勉強会・コミュニティ運営について語ろう Documentary of .NETラボ
勉強会・コミュニティ運営について語ろう Documentary of .NETラボ
Tomokazu Kizawa
デザイナーズハック 008 定例MTG テレビUIの研究
デザイナーズハック 008 定例MTG テレビUIの研究
Chihiro Tomita
八子クラウド座談会 当日討議メモ付き資料 20180721
八子クラウド座談会 当日討議メモ付き資料 20180721
知礼 八子
20220921_京都のIT業界団体が取り組む地元のDX推進サポート.pdf
20220921_京都のIT業界団体が取り組む地元のDX推進サポート.pdf
KYOSOPRAS
座談会資料(討議メモ付き) 20170225
座談会資料(討議メモ付き) 20170225
知礼 八子
座談会資料(趣旨説明資料) 20161022
座談会資料(趣旨説明資料) 20161022
知礼 八子
座談会(趣旨説明資料) 20160417
座談会(趣旨説明資料) 20160417
知礼 八子
Notes festa 2015 iot時代におけるnotes domino
Notes festa 2015 iot時代におけるnotes domino
賢次 海老原
東大大学院 戦略ソフトウェア特論2021「ロボットで世界を計算可能にする」海野裕也
東大大学院 戦略ソフトウェア特論2021「ロボットで世界を計算可能にする」海野裕也
Preferred Networks
Bot Builder V4 SDK + QnA Maker / LUIS
Bot Builder V4 SDK + QnA Maker / LUIS
Yoshitaka Seo
座談会資料(趣旨説明資料) 20161117
座談会資料(趣旨説明資料) 20161117
知礼 八子
PIT_seisaku2023.pptx
PIT_seisaku2023.pptx
ssuser895b97
IETFの道しるべ-IETFの歩き方-20230124.pdf
IETFの道しるべ-IETFの歩き方-20230124.pdf
Shoichi Sakane
Webを支える組み込み技術
Webを支える組み込み技術
Yuji Chiya
20100828 code4 lib_japan_事業説明(全事業)
20100828 code4 lib_japan_事業説明(全事業)
Code4Lib JAPAN
いまさら聞けない機械学習のキホン
いまさら聞けない機械学習のキホン
dsuke Takaoka
Similar to ZENKEI AI FORUM 2020/01/31
(20)
東京研修プログラム
東京研修プログラム
Android IoTとプログラミング教育
Android IoTとプログラミング教育
Microsoft Teamsのライブイベントによるオンライン勉強会 -.NETラボオンライン勉強会の舞台裏-
Microsoft Teamsのライブイベントによるオンライン勉強会 -.NETラボオンライン勉強会の舞台裏-
ZENKEI AI FORUM 2019 #7
ZENKEI AI FORUM 2019 #7
勉強会・コミュニティ運営について語ろう Documentary of .NETラボ
勉強会・コミュニティ運営について語ろう Documentary of .NETラボ
デザイナーズハック 008 定例MTG テレビUIの研究
デザイナーズハック 008 定例MTG テレビUIの研究
八子クラウド座談会 当日討議メモ付き資料 20180721
八子クラウド座談会 当日討議メモ付き資料 20180721
20220921_京都のIT業界団体が取り組む地元のDX推進サポート.pdf
20220921_京都のIT業界団体が取り組む地元のDX推進サポート.pdf
座談会資料(討議メモ付き) 20170225
座談会資料(討議メモ付き) 20170225
座談会資料(趣旨説明資料) 20161022
座談会資料(趣旨説明資料) 20161022
座談会(趣旨説明資料) 20160417
座談会(趣旨説明資料) 20160417
Notes festa 2015 iot時代におけるnotes domino
Notes festa 2015 iot時代におけるnotes domino
東大大学院 戦略ソフトウェア特論2021「ロボットで世界を計算可能にする」海野裕也
東大大学院 戦略ソフトウェア特論2021「ロボットで世界を計算可能にする」海野裕也
Bot Builder V4 SDK + QnA Maker / LUIS
Bot Builder V4 SDK + QnA Maker / LUIS
座談会資料(趣旨説明資料) 20161117
座談会資料(趣旨説明資料) 20161117
PIT_seisaku2023.pptx
PIT_seisaku2023.pptx
IETFの道しるべ-IETFの歩き方-20230124.pdf
IETFの道しるべ-IETFの歩き方-20230124.pdf
Webを支える組み込み技術
Webを支える組み込み技術
20100828 code4 lib_japan_事業説明(全事業)
20100828 code4 lib_japan_事業説明(全事業)
いまさら聞けない機械学習のキホン
いまさら聞けない機械学習のキホン
More from Kengo Ichiki
ZENKEI AI FORUM 2020/07/29 ZOOM ライブ(市來健吾)
ZENKEI AI FORUM 2020/07/29 ZOOM ライブ(市來健吾)
Kengo Ichiki
ZENKEI AI FORUM 2019/12/24
ZENKEI AI FORUM 2019/12/24
Kengo Ichiki
ZENKEI AI FORUM 2019 #6 (予告編)
ZENKEI AI FORUM 2019 #6 (予告編)
Kengo Ichiki
ZENKEI AI FORUM 2019 #4
ZENKEI AI FORUM 2019 #4
Kengo Ichiki
ZENKEI AI FORUM 2019 第1回
ZENKEI AI FORUM 2019 第1回
Kengo Ichiki
ZENKEI AI セミナー 第1回 概要説明会
ZENKEI AI セミナー 第1回 概要説明会
Kengo Ichiki
More from Kengo Ichiki
(6)
ZENKEI AI FORUM 2020/07/29 ZOOM ライブ(市來健吾)
ZENKEI AI FORUM 2020/07/29 ZOOM ライブ(市來健吾)
ZENKEI AI FORUM 2019/12/24
ZENKEI AI FORUM 2019/12/24
ZENKEI AI FORUM 2019 #6 (予告編)
ZENKEI AI FORUM 2019 #6 (予告編)
ZENKEI AI FORUM 2019 #4
ZENKEI AI FORUM 2019 #4
ZENKEI AI FORUM 2019 第1回
ZENKEI AI FORUM 2019 第1回
ZENKEI AI セミナー 第1回 概要説明会
ZENKEI AI セミナー 第1回 概要説明会
Recently uploaded
TataPixel: 畳の異方性を利用した切り替え可能なディスプレイの提案
TataPixel: 畳の異方性を利用した切り替え可能なディスプレイの提案
sugiuralab
クラウドネイティブなサーバー仮想化基盤 - OpenShift Virtualization.pdf
クラウドネイティブなサーバー仮想化基盤 - OpenShift Virtualization.pdf
FumieNakayama
CTO, VPoE, テックリードなどリーダーポジションに登用したくなるのはどんな人材か?
CTO, VPoE, テックリードなどリーダーポジションに登用したくなるのはどんな人材か?
akihisamiyanaga1
デジタル・フォレンジックの最新動向(2024年4月27日情洛会総会特別講演スライド)
デジタル・フォレンジックの最新動向(2024年4月27日情洛会総会特別講演スライド)
UEHARA, Tetsutaro
AWS の OpenShift サービス (ROSA) を使った OpenShift Virtualizationの始め方.pdf
AWS の OpenShift サービス (ROSA) を使った OpenShift Virtualizationの始め方.pdf
FumieNakayama
業務で生成AIを活用したい人のための生成AI入門講座(社外公開版:キンドリルジャパン社内勉強会:2024年4月発表)
業務で生成AIを活用したい人のための生成AI入門講座(社外公開版:キンドリルジャパン社内勉強会:2024年4月発表)
Hiroshi Tomioka
モーダル間の変換後の一致性とジャンル表を用いた解釈可能性の考察 ~Text-to-MusicとText-To-ImageかつImage-to-Music...
モーダル間の変換後の一致性とジャンル表を用いた解釈可能性の考察 ~Text-to-MusicとText-To-ImageかつImage-to-Music...
博三 太田
自分史上一番早い2024振り返り〜コロナ後、仕事は通常ペースに戻ったか〜 by IoT fullstack engineer
自分史上一番早い2024振り返り〜コロナ後、仕事は通常ペースに戻ったか〜 by IoT fullstack engineer
Yuki Kikuchi
Recently uploaded
(8)
TataPixel: 畳の異方性を利用した切り替え可能なディスプレイの提案
TataPixel: 畳の異方性を利用した切り替え可能なディスプレイの提案
クラウドネイティブなサーバー仮想化基盤 - OpenShift Virtualization.pdf
クラウドネイティブなサーバー仮想化基盤 - OpenShift Virtualization.pdf
CTO, VPoE, テックリードなどリーダーポジションに登用したくなるのはどんな人材か?
CTO, VPoE, テックリードなどリーダーポジションに登用したくなるのはどんな人材か?
デジタル・フォレンジックの最新動向(2024年4月27日情洛会総会特別講演スライド)
デジタル・フォレンジックの最新動向(2024年4月27日情洛会総会特別講演スライド)
AWS の OpenShift サービス (ROSA) を使った OpenShift Virtualizationの始め方.pdf
AWS の OpenShift サービス (ROSA) を使った OpenShift Virtualizationの始め方.pdf
業務で生成AIを活用したい人のための生成AI入門講座(社外公開版:キンドリルジャパン社内勉強会:2024年4月発表)
業務で生成AIを活用したい人のための生成AI入門講座(社外公開版:キンドリルジャパン社内勉強会:2024年4月発表)
モーダル間の変換後の一致性とジャンル表を用いた解釈可能性の考察 ~Text-to-MusicとText-To-ImageかつImage-to-Music...
モーダル間の変換後の一致性とジャンル表を用いた解釈可能性の考察 ~Text-to-MusicとText-To-ImageかつImage-to-Music...
自分史上一番早い2024振り返り〜コロナ後、仕事は通常ペースに戻ったか〜 by IoT fullstack engineer
自分史上一番早い2024振り返り〜コロナ後、仕事は通常ペースに戻ったか〜 by IoT fullstack engineer
ZENKEI AI FORUM 2020/01/31
1.
ZENKEI AI FORUM 2020年1月31日 ITビジネスプラザ武蔵 4F
オープンサロン「CRIT」
2.
本日の内容 2020年版 最近の話題から (全景 市來健吾) レコメンドエンジン開発 1週間チャレンジ (八島直道 氏)
3.
オンライン フォーラム への招待 アドレス https://forum.ai.zenkei.com/ アカウント、すぐ発行します
4.
これからの 予定 • 毎月1回、午後6時半から9時まで、 開催予定 • 2月28日(金曜日) •
変更などあったら、 オンラインフォーラムなどで お知らせします • 併せて、発表者も絶賛募集中です! • 話題は AI に関連していれば なんでも結構です • お気軽にお問い合わせください • ai-forum@zenkei.com
5.
2020年版 最近の話題から 全景 市來健吾 2020年1月31日 ITビジネスプラザ武蔵 CRIT
6.
今日の 内容 •まだ ReLU 使ってるの? •あなたのモデルは シフト不変?
7.
というか、 まだ 画像分類? 画像ベースの基礎 →オブジェクト認識、姿勢推定、などなど まだ発展している →今日のメイントピック 五郎島金時の分類 →人間を超えたい! やっぱりスゴイ、やってて楽しい →コンペで腕試し!
8.
画像 (分類) コンペ •浮世絵コンペ •Kannadaコンペ •Bengaliコンペ
9.
浮世絵コンペ
10.
Exploratory Data Analysis
11.
浮世絵作家クイズ 0 1
12.
浮世絵作家クイズ 2 3
13.
浮世絵作家クイズ 4 5 6
14.
浮世絵作家クイズ 7 8 9
15.
正解発表、作家0
16.
正解発表、作家0 歌川広重
17.
正解発表、作家0 歌川広重
18.
正解発表、作家0 歌川広重
19.
正解発表、作家1
20.
正解発表、作家1 葛飾北斎
21.
正解発表、作家1 葛飾北斎
22.
正解発表、作家1 葛飾北斎
23.
正解発表、作家2 勝川春章
24.
正解発表、作家3 窪俊満
25.
正解発表、作家4 喜多川歌麿
26.
正解発表、作家5 歌川国貞
27.
正解発表、作家6 鈴木春信
28.
正解発表、作家7 柳々居辰斎
29.
正解発表、作家8 鳥居清長
30.
正解発表、作家9 楊洲周延
31.
東洲斎写楽はない?
32.
Exploratory Data Analysis
33.
浮世絵コンペ 結果
34.
浮世絵コンペ 結果
35.
モデル
36.
モデル
37.
モデル
38.
Kannada コンペ
39.
40.
EDA
41.
Kannada コンペ 結果
42.
43.
44.
Bengali コンペ (絶賛開催中)
45.
46.
Bengaliコンペ grapheme 総数:
1295 予測は以下について行う • Roots (168 種類) • Vowels (11 種類) • Consonants (7 種類)
47.
Bengali コンペ 途中 結果
48.
Bengaliコンペ
49.
本 題 2020年版 最近の話題から
50.
(2019年9月25日のスライドから) 最近の話題から fast.ai 2019 Part
2 (Lessons 8 ~ Lesson 14) Transfer Learning (BatchNorm について) Optimizer (LAMB, RAdam, LookAhead, Ranger) Data Augmentation (Mixup) Loss 関数 (Label Smoothing) zenkei_ai パッケー ジを github に 公開!
51.
2020年版 最近の話題から Mish Manifold Mixup Antialiased CNNs GeM Pooling Pseudo Labeling Emsemble Learning
52.
今日の メイン •まだ ReLU 使ってるの? •あなたのモデルは シフト不変?
53.
2020年版 最近の話題から Mish
54.
Mish
55.
Mish
56.
Mish https://github.com/lessw2020/mish 使い方: nn.ReLU(inplace=True) を Mish() に 置き換えるだけ
57.
例)Mish + XResNet 実装例:
Adam+Mish.ipynb cf. https://github.com/muellerzr/fastai-Experiments-and-tips
58.
Mish 比較 Bengali コンペ • 感覚的には、とても良い! •
追い込んでいると、 一部、少し悪くなるものもある?
59.
2020年版 最近の話題から Manifold Mixup
60.
Manifold Mixup
61.
Mixup
62.
Mixup
63.
Mixup
64.
Manifold Mixup
65.
自分で組み込んでみた • Mixup https://github.com/facebookresearch/mixup-cifar10 • ベースモデル(Mish
+ DenseNet by Iafoss) https://www.kaggle.com/iafoss/grapheme-fast-ai-starter-lb-0-964 • Manifold Mixup https://github.com/vikasverma1077/manifold_mixup
66.
Bengali コンペ で 実験中
67.
Bengaliコンペで実験中 • Mixup (α=1)
が今のベスト • Mixup のパラメータ α=1 が α=0.1 より良い(?) • Manifold Mixup は (Input) Mixup より悪い(?) • Manifold Mixup のパラメータ (調査中)
68.
2020年版 最近の話題から Antialiased CNNs
69.
Antialiased CNNs
70.
• PyTorch コード https://github.com/adobe/antialiased-cnns
71.
Antialiased CNN + Mish
72.
Bengaliコンペの途中結果から 比較可能な3件 •2つは改善(↑) •1つは悪化(↓)
73.
2020年版 最近の話題から GeM Pooling
74.
GeM Pooling
75.
GeM Pooling
76.
GeM pooling を使った モデル
77.
浮世絵 コンペ の 結果 GeM pooling の方が(僅かに)悪い…
78.
2020年版 最近の話題から Emsemble Learning
79.
Ensemble Learning 浮世絵 コンペ の 結果
80.
2020年版 最近の話題から まとめ Mish Manifold Mixup Antialiased CNNs GeM Pooling Pseudo Labeling Emsemble Learning
81.
2020年版 最近の話題から まとめ Mish とても良い! Manifold Mixup Mixupは良い Antialiased CNNs 良い。 GeM
Pooling よく分からない Pseudo Labeling よく分からない EnsembleLearning とても良い! ? ?
Download now