僕らのデータ同期プラクティス

僕らのデータ同期プラクティス

• 1.
  僕らのデータ同期プラクティス Nkzn@ウォーターセル株式会社 2015.4.25 DroidKaigi
• 2.
  裏おもしろそう・・・・・！！！ こっち来てくれた皆さんありがとうございます
• 3.
  @Nkzn (なかざん) • 中川幸哉 (28) • WaterCell Inc. @ Niigata • UIデザイナーとアーキテクトの狭間をうろう ろしている • 日本Androidの会 新潟支部（活動停止中）
• 4.
  私とAndroid • 2009年：卒業研究でAndroid(HT-03A) • 2010年：日本Androidの会新潟支部立ち上げ • 2011年：現職にJOINして農業者向けアプリ作り • 2013年：Eclipseと決別してAndroid Studioを導入
• 5.
  感想文書いたら 結構話題になってビビった
• 6.
  Where is youruser?
• 7.
  Where is youruser?
• 8.
  自社アプリをオフライン化 ∼試される大地∼
• 9.
  弊社サービスについて • アグリノート
 http://www.agri-note.jp • 農業生産者向けの農作業管理システム •Webブラウザ版、Androidアプリで提供
 iOS版は開発準備中 • 農業版Redmineに近づいてる
• 11.
  水稲／コシヒカリ ほ場：A-2 作業予定・記録 日付 作業項目 作業者・作業時間 農薬名・使用量 肥料名・使用量 機械 写真 メモ マスタデータと トランザクションデータ
• 12.
  ファーストバージョン 2012年3月リリース。 画面開いた時にフェッチしてくるやーつ。 ＝電波がないところでは動かない
• 13.
  30km (電波が) 試される大地
• 14.
  気合で同期機能を実装する AlarmManager + IntentService???
• 15.
  同期処理に必要なもの • 定期的に、または何らかのキックにより • バックグラウンドで通信を行い •アプリ内のDBを更新する
• 16.
  2013年スタイル AlarmManager IntentService 頑張ってデータを ダウンロードしてきて INSERTする処理 Intent 定期的に実行
• 17.
  れ出るつらみ • AlarmManagerがときどき消える • IntentServiceが連続で走って止まらない •マルチスレッドでDB叩く状態に突入 • synchronized祭り • ネットワーク有無の検知のために割と頻繁に起動
• 18.
  Androidが提供するデータ同期機能 AccountAuthenticator + SyncAdapter+ ContentProvider
• 19.
  AndroidManifest.xml SyncService xml/authenticator.xml <service> xml/sync_adapter.xml <service><provider> authorities ContentProvider SyncAdapter contentAuthority accountType accountType onPerformSync() 同期処理を実装 SyncAdapter利用の最小構成クラス ファイル パラメータ 凡例: AuthenticationService AccountAuthenticator
• 20.
  本当に大事なのは onPerformSyncの中で何をするか public class SyncAdapterextends AbstractThreadedSyncAdapter { // ... @Override public void onPerformSync(Account account, Bundle extras, String authority, ContentProviderClient provider, SyncResult syncResult) { /* Elegant Synchronization */ } // ... }
• 21.
  設計を分けれるの嬉しい ContentProvider SQLite Data Access Object UI付近のコードSyncAdapter API Client AccountAuthenticator AccountManager
• 22.
  使ってる人が少ない気がする
• 23.
  ドキュメンテッドになったのが 割と最近？ 2013年まで公式ドキュメントなかったっぽ い・・・？（Web Archive調べ）
• 25.
  突然情報が出始めた 2009年 2010年 2011年2012年 2013年 2014年 Android 2.0 Google I/Oで言及 50 Android Hacks 公式ドキュメントが公開？ 50 Android Hacks日本語版 mixi-inc/AndroidTraining 弊社もこの頃から 触り始めた
• 26.
  同期アルゴリズムの検討
• 27.
  参考にした資料 • 50 AndroidHacksのサンプルコード • https://github.com/Macarse/50AH-code/ • Hack 23（Pythonサーバー付き） • Evernote Synchronization via EDAM • https://dev.evernote.com/intl/jp/doc/articles/ synchronization.php • https://github.com/ninjinkun/EDAMSync/blob/master/EDAM- Japanese.md （日本語訳）
• 28.
  採用した仕組み • Full Sync,Incremental Sync • StatusFlag("dirty" flag)
• 29.
  Full Sync, IncrementalSync サーバー クライアント 1 2 3 1 2 3 1 2 3 1 2 3 Full Sync Incremental Sync
• 30.
  差分を請求する id data modified_at 1hoge 10:00 2 fuga" 12:00 3 piyo" 15:00 4 hogehoge" 20:00 http://hoge/hoge?modified_after=13:00 last_fetched = 13:00
• 31.
  StatusFlag ("dirty" flag) 未同期のクライアント環境でデータに変更が あったことを表すフラグ
• 32.
  4つのStatus CLEAN サーバーから受け取ったままの状態 ADD 新規に作成された （まだクライアント側にしかない） MOD サーバーから受け取ったものに変更を施した DELETEサーバーから受け取ったものを削除した
• 33.
  同期の流れ
• 34.
  同期の流れ 1. データのダウンロードを行う • 初回はFullSync, 2回目以降はIncremental Sync 2. サーバーで削除されていたデータをクライアントでも削除する 3. サーバーで更新されていたデータをクライアントでも更新する 4. クライアント側で作成(ADD)・更新(MOD)・削除(DELETE)されたデータ をサーバへ送信する 5. 送信が済んだデータのStatusFlagをCLEANにする 6. last_fetchedを1の時刻に更新する
• 35.
  競合問題 > ２. サーバーで削除されていたデータをクライアントでも削除する >３. サーバーで更新されていたデータをクライアントでも更新する 同じデータの削除や更新がサーバーとクライアント両方で行われてい た場合、競合する
• 36.
  対応策 • 常にサーバー側が勝つ • 送信を諦める •常にクライアント側が勝つ • サーバーからのデータを捨てる • クライアント側でマージしてからサーバーへ送る • なんとか全部生かす Evernoteはこれ アグリノートはこれ
• 37.
  同期パターンの確認
• 39.
  まとめ • mixi-inc/AndroidTrainingでSyncAdapterを勉強して • 50AHでSyncAdapterのサンプルを知って •EDAMの理屈を参考にして同期の仕組みを考える • 競合解決の方針はそのサービスのポリシー次第
• 40.
  最後に ウォーターセル株式会社では、地球人口100億の時 代に見合う食料生産のための農業革命を一緒に引っ 張っていってくれるAndroid/iOSエンジニアを探し ています。