The Data Science Program 讓公共服務變聰明的《資料科學計畫》（蔣居裕）

datasci.co Data Science Program

讓公共服務變聰明的《資料科學計畫》�

2014.07.19

Etu 負責人 & DSP 執委蔣居裕 (Fred Chiang) @fredchiang / [email protected]�


故事的開始�

2


伯朗沒了，雲端未成，資料科學先行�

3


http://www.etusolution.com/training

Etu Training – 針對 Hadoop Big Data

L1-B 全員的 Big Data 第一天 L1-R 行銷者的精準推薦第一天� L1-A 技術人員的 Etu Appliance 第一天� L1-D 軟體開發者的 Hadoop 第一天� L1-H 軟體開發者的 NoSQL-HBase 第一天� L1-M 軟體開發者的 MapReduce 第一天� L1-V 資料分析者的 Visualization 第一天� L1-L 資料分析者的 RHadoop 第一天

L2-P 軟體開發者前進 Pig L2-I 軟體開發者前進 Hive L2-H 軟體開發者前進 NoSQL-HBase L2-V 資料分析者前進 Visualization L2-L 資料分析者前進 RHadoop

4

Small Data 就不需要資料科學嗎？


處理者�

分析者�

Source: Next-Gen Data Scientist, Dr. Rachel Schutt

70%～85% 的工作時間�

資料科學 End-to-End 流程�

5

策略者�

策略者�


DSP 緣起華山 – 2013.5.16 精誠在「科技釀造，寫意人生」

活動中提出「生活數據創新平台」�

6


Data Weekend #5 – 2013.8.17

http://www.slideshare.net/fchiangtw/data-weekend-5

7


Data Weekend #6 – 2013.9.28

8


《資料科學團隊養成計畫》 Data Science Program (DSP)

人才為本

應用為價值�

在3年內，為台灣培養300位

資料科學團隊成員�

9

CSR

Open Development


最後籌備期：2013.09.29 ~ 2013.12.13

執行委員會�

執行長 (CEO) / 執行秘書�

行政部�

營運長 (COO)�

教學部�

課程長 (CCO)�

行銷部�

行銷長 (CMO)�

顧問團�

顧問長�

10


codefortomorrow.org

11


DSP 已開課程 (持續開發中)�

1.  Team Training：《團訓班》

2. Data ETL and Analysis with Python：《資料爬理析 Python 實戰班》；兩天上手政府資料分析

3.  Finding Stories with Data Analysis：《看資料找故事工作坊》；以政府採購標案為例 (Aug2-3)

12


資料科學 (Data Science) 的要素

分工� 團隊�

人� 知識�

技能�

工具�

資料�

Domain

Pain Point

Value Up

心法�

13


http://www.etusolution.com/DSP/edm_dsp2.html

14


專業分工組隊� •  Campaigner •  Analyst •  Hygienist •  Designer

15



Dataset 1：內政部不動產實價登錄資料�

•  民國 101.08 ~ 102.09 •  全台灣 •  租賃、買賣、預售 •  約 47 萬筆資料

17


Dataset 2：PIXNET Hackathon 開放資料�

1.  熱門照片的相關資料 (metadata)� 2.  相片的 EXIF 資料� 3.  人氣部落格的詮釋資料 (metadata)� 4.  人氣部落格的訪客記錄 (visitor logs)�

* 部落格與相片的內容資料，可以透過 PIXNET API 取得。�

18


Data Fiesta：DSP 結訓成果交流�

19


Team Project 團訓班第 1 期團訓班第 2 期

#1 我要成為天聾人股份有限公司《Bargaining Power》

無殼蝸牛聯盟《房價正義》

#2 遊戲茄子《驚爆房地產》

航海王《部落客銀行》

#3 逆轉人生全球顧問股份有限公司《小資男女翻身計畫》

愛。住易《找尋銀髮幸福宅》

#4 光點選址服務《小火鍋創業選址模型》

小資“救世“組《千金買房‧萬金買鄰》

#5 財團法人避稅剋星《土地買賣稅費異常資料查詢平台》

Captain 《Hot Zone》

20


愛。住易 -《找尋銀髮幸福宅》 Infographic download: http://goo.gl/fKdXXi

21


我從 DSP 團訓班學到的事�

1.  人才不缺；缺的是組織力� 2.  教育不缺；缺的是跨學科 End-to-End 串連� 3.  資料不缺；缺的是直接有力的開放策略�

4.  洞見不缺；缺的是行動�

22


多或少�

1  多一點生活，少一點憤義� 2  多一點策略，少一點包裝� 3  多一點資料，少一點想像�

4  多一點關聯，少一點加總�

23


資料與價值�

個人資料 Quantified-self Data

企業資料 Corporate

Data

NGO 資料 NGO Data

政府資料 Government

Data

個人價值� 商業價值� 社會價值�

國家戰略價值�

24


No Data, No Science Please be Smart, Government

we need the real (open) data for

many things good

25


DSP 的近期未來發展�

1  開發更多新課程，挖掘更多新講師� 2  發展企業與學校夥伴關係� 3  朝向社會企業法人化�

4  發展社群與志工�

26


thank you

27

Government & Nonprofit

The Data Science Program 讓公共服務變聰明的《資料科學計畫》 （蔣居裕）

The Data Science Program 讓公共服務變聰明的《資料科學計畫》（蔣居裕）