In

1. 讓 Django 專案直接開上 GAE
好險網
Winston@insureme.com.tw
Ijs@insureme.com.tw
2011.8.21@COSCUP2011
陳翅膀、王貓貓，上台鞠躬

2. 2011年2月

3. 四個年輕人
因為創業的夢

4. 他們組成了
驚奇四超人？

5. 資訊技術
理財知識

6. 精實創業
沒錢、沒閒、沒資源

7. 豐富のIT資源？
Server？
Framework？
頻寬？
效能？
NO WAY !!

8. 沒錢
Prototype 還是要做！

9. 好在我們有廣大的免費 / OSS資源

10. 找齊夥伴，朝偉大航道邁進，前進！！！

11. 屎了！

12. GAE太害羞，不太想讓 DJANGO 騎^H上
毛病一堆

13. NO, NO, NO~ 那一點都不FASHION
I Don’t Want！
• To Use google.appengine objs
• To Use only goolge user
management system
• The hassles of rewriting the
codes to port the legacy
system

14. “念”你
我的字典裡沒有～放棄
因為已鎖定D
我從不做空白的Coding～
因為已決定D
眼見這月亮悄悄溜走
又見那太陽緩緩升起
多少Solution變換
多少Study Cases
Debug不偷懶始終如一…

15. 終於！我們找到了….

16. 一個框架與平台合作無間的故事

17. Django Nonrel
• 獨立於官方 Django 之外
• 加入 NoSQL Database 功能來支援 ORM
Django Nonrel表示：

18. Django Nonrel 原理？
• Developers 對 Model 操作
• Django ORM
• SQL
• Django-dbindexer
• No-Sql DB Calls

19. 為何要選 Django Nonrel？
• 可以把程式轉到 non-relational DBs 上
• 可以把程式PO回 SQL DBs 上
• 不用手動 / 程式處理 Denormalization

20. 為何要選 Django Nonrel？
• 不用手動改寫下列 querie
（JOINs, select_related(), etc.） <並非全部支援>
• 不會被鎖在單一平台提供商（GAE, etc.）

21. Django Nonrel 目前支援
• GAE 跟 djangoappengine 混搭
• MongoDB 跟 MongoDB backend 混搭

22. Django Nonrel 開發支援中的
• ElasticSearch
• Cassandra
• 更多訊息：
http://www.allbuttonspressed.com/projects
/django-nonrel

23. Djangoappengine
• 內藏 Django App Engine 後台整合：
– DB
– Email
• 一定要跟 Django Nonrel 混搭

24. 來玩一下吧！

25. 從頭開始專案，吃蛋糕一樣!
• 下載樣板專案
• 複製所有.py 與.yaml到你專案的根目錄
• 接著：

26. 從頭開始專案，吃蛋糕一樣!
下載並複製以下資料夾到指定地點：
From To
django-nonrel / django <project> / django
djangotoolbox / djangotoolbox <project> / djangotoolbox
django-autoload / autoload <project> / autoload
django-dbindexer / dbindexer <project> / dbindexer
djangoappengine <project> / djangoappengine

27. 從頭開始專案，吃蛋糕一樣!
目前專案的資料夾看起來是這樣：
<project> / django
<project> / djangotoolbox
<project> / autoload
<project> / dbindexer
<project> / djangoappengine

28. 那我的Dependency呢?
• 但是可以『打包』整包的原始碼呀~
• 放在專案根目錄下就ok啦！

29. 那我的Dependency呢?
• Zip起來，放在根目錄的zip-packages下
注意：
請不要 zip 所有在settings.py中
INSTALLED_APPS下的dependency

30. 在自己的機器上試試看!
winston_awesome> python manage.py runserver
Try it!

31. 丟上GAE跑跑看吧！
winston_awesome> python manage.py deploy
Try it!

32. DEMO

33. It works!

34. 關於備份資料…
• 直接使用 Google 提供的工具！
– Bulkloader
http://code.google.com/appengine/docs/python/to
ols/uploadingdata.html
• 如果你想用聽起來更屌的：
– Gaebar
http://aralbalkan.com/1784（沒測過，不負責推薦）

35. 限制是…
• 請不要用JOIN !!
（沒差，對我來說，JOIN很不直覺）
• 沒有 many-to-many 的關係
• 沒有 Aggregates
• 沒有 transactions
但可以用GAE 的run_in_transaction()
• 沒有 QuerySet.select_related()

36. 如果我想PO舊的APP呢?
• 改一下 setting.py 資料庫與 INSTALLED_APPS
• 把你Dependency的原始碼打包進來
• 對！這樣就ok了！

37. DEMO

38. GAE
開上？騎上？坐上？都行啦！反正…你懂得>///<

39. 還有一些東西要注意！
• 如果你的APP有用JOINs或是其他沒有
支援的語法
• 你必須要改寫過！

40. 把你SQL的資料放上GAE？
• 這是個『異常痛苦』
的經驗！
• 試過很多辦法，包
括混搭 django
terminal 與
threads

41. 把你SQL的資料放上GAE？
如果你真的要做，請愛用Google的方式
google map reduce 與 CSV file 上傳!
（但是！還是很難用！）

42. 用CSV上傳整個資料庫
• 單一檔案大小上限：1 MB
• 也就是說….如果你的資料庫CSV有1G，
你要上傳1024個檔案… XD
• 但這比較是GAE的問題啦！

43. GAE還有什麼問題？
免費的總是最貴，資源限制一堆
尤其是：
流量 / 頻寬！

44. Yoooooooooo它就漫出來了oooooooo!!!
一不小心，就會發生杯具…
Pingooo當司
機
Pingooo回到電腦
前
(3616 hits, 295 IPs) @ 20:00

45. 後來，
我總算學會了
如何去省……
節省資源，從小地方做起！

46. 把靜態檔案切割搬出去！

47. 平均五次/單位 ms Yahoo GAE Google Code
Yahoo Logo
( 2,338 Bytes )
With Cache 26.6 319.6 23
Without Cache 43 247.6 267
With Cache Waiting for Response 15.6 205.4 20.8
Receiving Data 0 0 0
Without Cache Waiting for Response 22.6 234.6 290.8
Receiving Data 13.2 0.8 1
Yahoo~~

48. 平均五次/單位 ms Pixnet GAE Google Code
Pixnet Header
( 42,616 Bytes )
With Cache 26.6 244.4 21
Without Cache 81 788.2 524.6
With Cache Waiting for Response 17.2 180.6 18.8
Receiving Data 22.8 0 0
Without Cache Waiting for Response 50.2 206.6 266.8
Receiving Data 28.8 502.6 184.4
Pinext！

49. 平均五次/單位 ms MurMur GAE Google Code
MurMur Header
( 34,775 Bytes )
With Cache 54.6 245.8 21.6
Without Cache 57.4 492.2 417
With Cache Waiting for Response 16 187 19.2
Receiving Data 0 0 0
Without Cache Waiting for Response 23.6 187.4 315.4
Receiving Data 23.2 486 147.8
Murmur….

50. 平均五次/單位 ms GoogleAPIs GAE Google Code
jQuery-1.4.1.min.js
( 70,843 Bytes )
With Cache 22 249 23.4
Without Cache 45.4 524.6 452
With Cache Waiting for Response 17 189 19
Receiving Data 0 0 0
Without Cache Waiting for Response 20.6 192.2 290.8
Receiving Data 17 323.6 242
jQuery

51. 平均五次/單位 ms GAE Google Code
Hinet_10m.zip
( 10,503,578 Bytes )
In GAE, the max size of a
single file is 10485760
bytes, and the size of test
file is 10503578 bytes.
519.8 KB/s
test.zip
( 6,736,342 Bytes )
710 KB/s 305.2 KB/s
隨便包個測測…

52. Bonus Session
• Cache
– 直接使用Django對memcache module
的API ，不需要使用GAE提供的
– memcache backend 預設是開啟的

53. Bonus Session
• 檔案上傳 / 下載
– 請愛用django-filetransfers
• 複製“filetransfers”資料夾到根目錄
• 新增“filetransfers”到 INSTALLED_APPS

54. Bonus Session
• 檔案上傳 / 下載
– App Engine Blobstore 預設是開啟的
– 詳細資料
http://www.allbuttonspressed.com/projects/djan
go-filetransfers

55. Bonus Session
• Task
–還沒好
DjangoAppEngine 團隊正在開發中….
–這時候，只能用Google的
http://code.google.com/appengine/docs/python
/taskqueue/

56. To GAE or Not To GAE?
• Task
• Transaction

57. Djnago Nonrel + Djangoappengine
1. django-social-auth
2. 有個舊的django app
結論 – 何時用？

58. • 請記住：不要用JOINs
（或其他不支援的語法）
結論 – 切忌

59. Django Nonrel + Djangoappengine 最好拿來
1. Prototyping
2. Homework
結論 – 最適合

60. • 誰知道？
• 說不定你會愛上GAE上的Django
結論 – 所以到底要不要？

61. 參考資料
• Django-nonrel & webdev blog
– http://www.allbuttonspressed.com/
• Django Snippets
– http://djangosnippets.org/snippets/1003/
• Django
– https://www.djangoproject.com/
• Google App Engine
– http://code.google.com/appengine/

62. 更多後續
• 好險有科技
http://techblog.insureme.com.tw
• 好險網
http://www.insureme.com.tw

63. 感謝
• 好險技術團隊所有夥伴
• Eric Wu, EragonJ, ygtw, 藏鏡人一號
• COSCUP 2011籌備團隊
• 各位台下聆聽的你！
陳翅膀、王貓貓，下台鞠躬

64. Q & A ?