8/15在東海大學

1. 臺灣資料工程協會
Taiwan Data Engineering Association
20170815 SITCON社群闖關活動

2. 關於TDEA
王耀聰，臺灣資料工程協會共同發起人之一，他表示大數據分析不只需要資
料科學家或資料分析師，實務上，國外常見還需要資料工程師和資
料架構師的角色，培養這兩類人才正是臺灣資料工程
協會的成立目的。
資料分析不只得先蒐集各式各樣的資料（買菜），還得先完成資料梳理（洗
菜、備料、熬湯），才有辦法進行不同的大數據分析（煮菜）。
「資料工程的任務就是準備資料科學家需要的資料，就像大廚也需要有二廚
備料，兩者缺一不可。」
臺灣資料工程協會將串連原有臺灣大數據技術社群，共同推動相關大數據活
動，也計畫參與Cloudera BASE計畫 (Big Analytics Skills Enablement) 大數
據分析技能訓練計畫，來培養臺灣業界資料工程人力。

3. 資料科學人才種類
資料來源：經理人月刊137期
3
我們建造資料池
我們架構資料管線

4. 資料科學家vs.資料工程師
4
資料來源：Data Scientist vs Data Engineer / Data Science 101

5. 台灣資科人才需求上看10萬人
5
資料來源：104人力網/iThome

6. 資料工程領域技術（你是我們的會員嗎？）
1. Hadoop Ecosystem
2. Spark
3. NoSQL Database (e.g. Mongo DB, Cassandra)
4. Relational Database (e.g. Oracle, MSSQL, DB2)
5. ETL Tools (e.g. Informatica)
6. Data Warehourse Solutions (e.g. SAP, Teradata)
7. Operation System (e.g. Linux)
8. Python, Java

7. 認識Apache開源計畫與台灣貢獻者
Apache Projects and Contributors

8. Apache軟體基金會
成立於1999年，非營利組織，英文名稱 Apache Software Foundation，簡
稱 ASF，
最早源於開發Apache HTTP伺服器的一個愛好者組織「Apache組織」。
Apache軟體基金會主要為開源項目提供組織、法務和其他形式的支持，它
所支持的項目和軟體產品都遵循Apache授權（Apache License）。
Apache軟體基金會目前取得成功的原因，如不干涉技術、權限分明的管理
架構、保持獨立與公開等原則。
Apache社區名言「社區勝於代碼」的理解、ASF重要里程碑與部分重要項目。
(原文網址：https://kknews.cc/zh-tw/tech/3ml6po.html)

9. 資料工程與大數據開源專案的關係
十年前Doug Cutting所開發的Hadoop
不僅開啟了大數據時代，更成為孕育
大數據技術的搖籃。如今Hadoop生態
圈發展出許多企業隨手可得的大數據
開源技術，

11. 哪幾位台灣人貢獻了哪些開源專案呢？
答案在…資料工程協會FB公開社團專頁！
或…萬事問Google大神

12. 陳恩平 葉祐欣 謝良奇、蔡東邦
蔡嘉平莊偉赳
戴資力

13. 9/30 DataConf.TW 在張榮發基金會
跟Apache開源專案臺灣貢獻者們見面！

14. 祝大家都能把資料變鑽石喔！