1.
Seleniumで
ニコニコ動画をスクレイピング
TeraBytes

2.
スクレイピングの際の注意
今回行った成果は、以下のURLを理解したうえで行いました。
当成果に対して何か問題があればご連絡お願いします。
http://qiita.com/nezuq/items/c5e827e1827e7cb29011
http://qiita.com/nezuq/items/3cc9772118ad112c18dc
https://account.nicovideo.jp/rules/account

3.
コメントを解析したい
これ

4.
どうやってとってくるか？

5.
Webスクレイピングで取得
ウェブページから画像やテキストのデータを抜き取ること

6.
スクレイピングも楽にできます

7.
既存ライブラリ・APIの弱み
動的なウェブページに弱い
欲しいHTML 取ってくるHTML

8.
Selenium

9.
Seleniumって？
Webブラウザを自動操作してくれる
IDEやAPIを提供
Webアプリのテストに使われるが
こいつでWebスクレイピングします

10.
コメント抽出

11.
自動で動画ページへ移動

12.
自動で動画ページへ移動
Seleniumドライバーの定義
動画ページにアクセス
ログインフォーム自動入力

13.
コメントをデータベースに保存

14.
コメントをMongoに保存
DOMの探索（読み込み待ち）
コメントの抽出

15.
ある程度集まったので解析

16.
前処理（形態素解析）
python + mecabで形態素解析
mecab-ipadic-neologdを使用
neologd適用従来のmecab
人名やサブカルの解析に強い

17.
再生時間1:00までの解析結果

18.
まとめ
Seleniumなら動的ページに対してもスクレイピングできる
スクレイピングの参考にしてください
ごちうさ難民は時事に強い