Z > B 的資料科學

劉嘉凱 (CK)!2014.08.30

資料科學的定義

資料科學的⼀一些定義

http://goo.gl/JOoec6

http://goo.gl/wmmjvQ http://goo.gl/yPyKIq

http://goo.gl/8RhFrk

⼀一個名詞，各⾃自表述

使⽤用科學⽅方法 進⾏行資料分析 解決真實世界的問題

我對資料科學的定義 （2014.08.30 版）

跨

現實世界 = f (Z, B)利 弊

管理觀點

Z⺫⽬目標： B>

資料科學

When All Science Becomes Data Science

http://goo.gl/IuWrJv

資料科學家的就業市場

http://www.indeed.com/jobtrends?q=data+science&l=

Salary

Jobs

http://www.lagou.com/jobs/200227.html?source=search

資料科學：⼀一種⾵風起雲湧的 幻覺

數據分析報告，作為管理階層決策資訊

客⼾戶⾏行為及價值分析

⽉月薪：$26-36K

規劃建⽴立資料探勘系統機制

擅⻑⾧長使⽤用 Excel 及函數、圖表等相關⼯工具

Data Mining Model, ⾃自動化資料分析平台

職務類別：軟體⼯工程師

連職缺都不會開

像樣的 市場規模

對的⼈人、對的職位、對的任務、對的策略

產業分⼯工 價值鏈

資料驅動的企業⽂文化

資料科學 ⼈人才

缺

資料科學：不願⾯面對的真相

如何讓幻境成真？

激發資料價值 資料科學教育

開放發展

開放發展

利害關係⼈人，⼤大家⼀一起來

激發資料價值

開放發展

PIXNET Hackathonhttp://codefortomorrow.org/portfolio/partnership/133

PIXNET Hackathon

PIXNET Hackathon

PIXNET Hackathon

PIXNET Hackathon

PIXNET Hackathon

PIXNET Hackathon

PIXNET Hackathon

PIXNET Hackathon

PIXNET Hackathonhttp://pixnethackathon2014.events.pixnet.net/

PIXNET Hackathon

PIXNET Hackathon

PIXNET Hackathon

SmartGov 政府開竅http://codefortomorrow.org/portfolio/immersion/149

SmartGov 政府開竅

SmartGov 政府開竅

SmartGov 政府開竅

資料科學 服務設計

產品（公共服務）

+

=

SmartGov 政府開竅

SmartGov Keynote: 如何讓政府變聰明

SmartGov 政府開竅

SmartGov 政府開竅

Code for Healthcarehttp://codefortomorrow.org/portfolio/partnership/141

Code for Healthcare

⾼高屏澎區域緊急醫療應變聯盟資料!• 提供單位：KAMERA 執⾏行團隊 • 說明：急診現場（每30分鐘忙碌情形）歷史資料 !急診轉診資料!• 提供單位：⾼高雄市衛⽣生局、屏東縣衛⽣生局 • 說明：⾼高屏區急救責任醫院病患轉診資訊 !外傷登錄資料!• 提供單位：台灣外傷醫學會 • 說明：外傷病患完整就醫資訊

資料集

資料授權1. 參與本活動即視為同意本資料授權條款。 2. 主辦單位所提供的各種資料，僅限本次活動使⽤用，不得另作他⽤用。

3. ⽇日後若有任何資料使⽤用需求，必須和主辦單位重新申請。

http://cft.kktix.cc/events/cfh-2014-summer

活動發起單位• ⾼高屏澎區域醫療網 • 台灣外傷醫學會 • KAMERA @ KMUH • ⾼高雄市政府衛⽣生局 • 屏東縣政府衛⽣生局 • Code for Tomorrow

Code for Healthcare

Code for Healthcare

Code for Healthcare

Code for Healthcare

Reasons for Transfer

轉診原因 醫院代碼

Code for Healthcare

Code for Healthcare

Code for Healthcare

Code for Healthcarehttp://dsp.im/2014/08/learned-from-cfh/

資料科學教育

開放發展

激發資料價值

DSPThe Data Science Program

資料科學計畫

http://dsp.im/

The DSP Team

Theore&cal  Knowledge

Applied  Knowledge

Advanced  Knowledge

Founda&onal  Knowledge

BS

MS

Ph.D

The !Real!

Business World

Market Positions

Theore&cal  Knowledge

Applied  Knowledge

Advanced  Knowledge

Founda&onal  Knowledge

BS

MS

Ph.D

Market Positions

DSP

Raw Data Clean Data

ModelData Product

Source: Educating the Next Generation of Data Scientists.

Data Science Data Lifecycle

Data Engineers

Raw Data Clean Data

ModelData Product

Data Analysts

```

Product ManagersAdapted from: 資料科學團隊⼈人才培育分享 ─ 以 DSP 為例

Data Science Professional Roles

Describe

Discover

PredictAdvise

Adapted from: The Field Guide to Data Science.

Data Science Analytic Goals

Acquire

ETL Storage

Aggregation Enrichment Processing

Regression Clustering

Regression Classification Recommendation

Simulation Optimization

Data Science Goal-Skill Matrix

Acquire Describe Discover Predict Advise

Hacking/Programming

Math/Statistics

Visual Design

Communications

Project Management

Domain Expertise

Analytic Goals

Prof

essi

onal

Ski

lls

Data Science Goal-Skill Matrix

Acquire Describe Discover Predict Advise

Hacking/Programming

Math/Statistics

Visual Design

Communications

Project Management

Domain Expertise

Analytic Goals

Prof

essi

onal

Ski

lls

戰戰競競的開始

2013.10.12

2013.10.12http://dsp.im/2013/11/one-class-of-data-science-in-a-life-time/

如果⼀一輩⼦子只能上⼀一堂資料分析課當 Data Science Program 籌備⼩小組在討論課程設計時，我們⽴立刻⾯面臨⼀一個難題：資料科學牽涉的領域既廣且雜，⼀一般⼈人花費⼀一兩個博⼠士學位的時間都未必能將基礎的知識學會，遑論精通了。究竟要如何設計教案，才能讓學員僅利⽤用數個週末的時間，就能⼀一窺資料科學的洞天福地？

⽤用個簡單的數學式表⽰示這個問題： !maximize 學習效果 subject to “學海無涯” & “⼈人⽣生有限” !⾯面對上述問題，要如何尋求最適解？

2013.10.12

資料科學團訓班

學員應該⾃自我期許，達成下列的學習⺫⽬目標： !1. 認識並體驗資料科學家的實際⼯工作流程 2. 學會⼀一些資料科學的概念、⼯工具、與專業技能

3. 透過個案研究與⼩小組作業，學會如何以團隊合作⽅方式，執⾏行資料分析的任務

學習⺫⽬目標

2013.10.12

Analyst

Programmer

Planner

Designer

0 20 40 60 80

18

48

67

75

（⼈人次）

23%

77%

Male Female

資料科學團訓班（兩期）

錄取者之服務單位： 中研院、國研院、⼤大學、太空中⼼心、資策會、政府機關、電信、網路服務、 醫療、NPO、法⼈人、⾦金融、壽險、資服、商業顧問、市調、⾼高科技、製造業...

Data Science for Business

⼼心法團訓班技術學程

企業贊助計畫

管理學程

中級實戰班

企業專班

政府專班

產業專班

嚴選專班

Data Hackathon

Data Challenge

Data Conference

課外活動

學!習!地!圖

策略夥伴計畫 DSP 校友團

DSP Strategy Map

Data Science for Business

⼼心法團訓班技術學程

企業贊助計畫

管理學程

中級實戰班

企業專班

政府專班

產業專班

嚴選專班

Data Hackathon

Data Challenge

Data Conference

課外活動

學!習!地!圖

策略夥伴計畫 DSP 校友團

DSP Strategy Map

Data Science for Business

⼼心法團訓班技術學程

企業贊助計畫

管理學程

中級實戰班

企業專班

政府專班

產業專班

嚴選專班

Data Hackathon

Data Challenge

Data Conference

課外活動

學!習!地!圖

策略夥伴計畫 DSP 校友團

DSP Strategy Map

2013

5 8 12

精誠集團提出⽣生活數據創新平台主張，與 CfT 開始討論

第⼀一次公開籌備會議

團訓班 1

2014

1

團訓班結業暨資料狂歡節

3

團訓班 2

資料爬理析班 1

5 6

資料爬理析班 2

8 9 10

看資料找故事⼯工作坊

PIXNET Hackathon

SmartGov Conference

7

Code for Healthcare Workshop

激 發 資 料 價 值

資 料 科 學 教 育

Code for Tomorrow & DSP Timeline

外傷醫學會DataWeekend #08 城市、資料、桌遊、社造

Open Data Day 2014DataWeekend #07

衛星資料、LiDAR、災難防救

1110

DataWeekend #03 司法判決、交通事故分析

7 2

成功的⼩小秘訣

講師即團隊http://dsp.im/2013/12/lecturers-are-a-team/

學員：共同學習、團隊合作

學員：情境模擬、公開驗收

講師：實戰訓練

講師：實戰訓練

資料科學 從⼩小紮根

https://c4t.hackpad.com/DSP-for-Kids-V1VJstfKDh7

溫馨⼩小叮嚀

http://goo.gl/8RhFrk

What if… • No hacking? • No statistics? • No domain knowledge?

物有不⾜足，智有不明，數有不逮