データジャーナリズム―異業種のコラボレーションがニュースを変える― (2013年12月)

データジャーナリズム―異業種のコラボレーションがニュースを変える―

赤倉優蔵

2013年12月14日

自己紹介

• 通信社システムエンジニア

–記者・デスク向け情報システムの設計・開発

–データを活用したウェブサービスの設計・開発

• 日本ジャーナリスト教育センター運営委員

–ジャーナリスト向けワークショップの企画・運営

2013/12/14 2データジャーナリズム―異業種のコラボレーションがニュースを変える―

トピックス

• 最新状況

• 事例研究

• 実践のための基礎知識

• 実践レポート

• ディスカッション


最新状況


データからニュースを発見し分かりやすく伝える手段


データジャーナリズムとは？

<事例紹介>変わらなかった？

「銃」社会


米銃規制法案をめぐる報道

• 2013年初頭、アメリカでは銃規制法案をめぐる報道が過熱

• データを駆使した様々な報道が展開されるも、最終的には廃案となる


銃に囲まれた生活(lohud.com)


銃の使われ方(The Washington Post)


銃が奪った人生(The Guardian + Periscopic)


それでも動かなかった「議会」(ProPublica)


2013/12/14 12

データジャーナリズムはニュースに

イノベーションを起こしている


2013/12/14

Data Journalism Awards 2013 Finalists- Data journalism awards 2013: get the full shortlist | The Guardian -

13データジャーナリズム―異業種のコラボレーションがニュースを変える―

Data Journalism Awards 2012- DATA JOURNALISM AWARDS 2012 DNA | GEN -


2013/12/14 15

MOOC Data-Drive Journalism Course 2013- Visualizations: Nationality of students attending the MOOC as of 22-08-2013 -

Anguilla(1)Antigua & Barbuda(1)Benin(1)Bermuda(1)Brunei(1)Burundi(1)Cuba(1)El Salvador(1)Estonia(1)Fiji(1)Gambia(1)Guam(1)Guyana(1)Haiti(1)Honduras(1)Iran(1)Jersey(1)Kuwait(1)Latvia(1)Macedonia(1)Oman(1)Qatar(1)Rwanda(1)Reunion(1)Samoa(1)Serbia(1)Sierra Leone(1)Slovakia(1)

Vanuatu(1)Yemen(1)Iraq(2)Liberia(2)Maldives(2)Moldova(2)Myanmar(2)Nicaragua(2)Palestine(2)Saudi Arabia(2)Somalia(2)Togo(2)Virgin Islands(2)Zambia(2)Kyrgyztan(3)Lithuania(3)Paraguay(3)Puerto Rico(3)Sri Lanka(3)Trinidad & Tobago(3)Uzbekistan(3)Austria(4)Azerbaidjan(4)Cameroon(4)Dominican Republic(4)Ethiopia(4)Ghana(4)Israel(4)

Jamaica(4)Madagascar(4)Malawi(4)Tanzania(4)Tunisia(4)Uruguay(4)Zimbabwe(4)Bahrain(5)Bangladesh(5)Bulgaria(5)Cambodia(5)Georgia(5)Hungary(5)Kazakhstan(5)Morocco(5)United Arab Emirates(5)Algeria(6)Armenia(6)Afghanistan(7)Indonesia(7)Jordan(7)Norway(7)Slovenia(7)Thailand(7)Belarus(8)Greece(8)New Zealand(8)Bolivia(9)

Mozambique(9)Panama(9)Poland(9)Romania(9)South Korea(9)Uganda(9)Czech Republic(10)Ecuador(10)Lebanon(10)Malaysia(10)Denmark(11)Ireland(12)Nepal(12)Taiwan(12)Singapore(13)Switzerland(14)Sweden(16)Costa Rica(18)Belgium(19)Pakistan(21)Ukraine(21)Guatemala(23)Peru(23)Portugal(23)Nigera(25)South Africa(26)Philippines(27)Vietnam(27)

Egypt(28)Kenya(28)Russia(28)Chile(29)China(30)Hong Kong(30)Venezuela(30)Finland(32)France(35)Colombia(38)Japan(45)Argentina(47)Italy(48)Netherlands(57)Australia(76)Germany(80)Mexico(91)Spain(95)Canada(120)India(131)United Kingdom(148)Brazil(257)USA(1361)

135 Countries,3,564 People.


2013/12/14 16

MOOC Data-Drive Journalism Course 2013- Visualizations: Nationality of students attending the MOOC as of 22-08-2013 -


2013/12/14 17

MOOC Data-Drive Journalism Course 2013- Yuzo Akakura | Wordle -

45 2203


広がりの背景

• データの激増 (多様化/巨大化)

• データ処理能力の向上

• 分析・可視化ツールの普及


海外メディアの動向

• ここ1〜2年で急速に普及

• 既に報道の現場にとって「取り組まざるを得ない手法」となりつつある

• 世界各国のメディアが試行錯誤しながら実績を作っている

– 2012年米大統領選報道

– 2013年米銃規制法案に関わる報道キャンペーン

–データジャーナリズムアワード


国内メディアの動向

• メディアによるデータジャーナリズムへの取り組みは「はじまったばかり」

–朝日新聞、毎日新聞、日経新聞、NHKなど、大手メディアが着手

–地方紙は「未着手」

• “参院選2013” の取り組み

– Twitter分析：毎日新聞、朝日新聞、NHK

–獲得議席数予測：Yahoo!JAPAN、niconico


事例研究“Toxic Waters”


ジャーナリストだけでは実践できない


データジャーナリズムの特徴

2013/10/21 23

“Toxic Waters”(汚染水域)

• NYTによる、全米の水質に関する2009年の調査報道

• 政府に対する500回を超える情報開示請求に

より取得したデータと、実際の水質データを比較、政府が水質を把握していなかったことをスクープ

• 水質データを地図にマッピングすることで、汚染水を垂れ流していた企業・施設を特定


2013/12/14 25

10 Articles +


ニュースアプリ?—伝統的ニュース—

2013/12/14 26

へぇ、そうなんだまぁ友達に

も勧めておくか

今回はいい記事かけたぞ! たくさんシェアされるといいな♩

<読者><記者/デスク>


ニュースアプリ?—ニュースアプリ—

2013/12/14 27

家の近くはどうなのかしら?

実家はどうなのかしら?

友達にも勧めよう!

なるほど!

読者の興味はここにあるのか!

記事に反映させよう!

<ユーザー><多様なスキルを持ったチーム>


反響

• [読者] 2,000を超えるコメント

• [社会] 規制強化につながる (社会を変えた)

• [報道] IRE Medalを受賞


2013/12/14 データジャーナリズム―異業種のコラボレーションがニュースを変える― 29

実現したのは「異業種チーム」


データ・エンジニア

アプリ・エンジニア

アナリストデザイナー

記者/編集者

2013/12/14 31

体制@NYT

<News Room (about 1,200)>

編集チーム

C.A.R.チーム(6-7)

グラフィックチーム(about 30)

インタラクティブニュースチーム(about 20)


2013/12/14 32

体制@Traditional

<編集部門>

編集チーム

グラフィックチーム

システム部門

ネット部門


2013/12/14 33

http://marijerooze.nl/thesis/graphics/?paper=NYT


http://marijerooze.nl/thesis/graphics/?paper=NYT

2013/12/14 34

読者に届ける工夫@NYT

• コメント欄の活用

• ソーシャルメディアの利用

• ロケーション情報の利用


ジャーナリストの役割by Derek Willis, NYT

• データジャーナリズムの全てをできる必要はない (できない)

• 大事なのは「ニュースを届けるより良い方法を知っていること」

• エンジニア、デザイナー、アナリストに「これはできるか？」「このツールは使えるか？」と問うことができるのが重要


進むコラボレーション

• データジャーナリズムの専門チームを設置

• “ハッカー” の採用を促進

• 外部協力者 (研究者・専門家) の拡充

• 同業/異業種間のコラボレーション



実践のための基礎知識－エンジニア編－


コストをかけず小さく実践


実践の肝

「3種の神器」

• OSS

• Google

• Cloud


基本プロセス

1. 企画

2. データ手配

3. データ分析 (ファクト抽出)

4. ファクト活用

5. インタラクション


(1/5) 企画

プロジェクトの企画を立案する

–仮説の設定

推進体制を組織化する

–チームビルディング


(2/5) データ手配

必要なデータを集める

– インターネットに公開されているデータ

【ScraparWiki】

– “公開されているはず”のデータ

– “あるはず”のデータ (情報開示請求)

集めたデータを整形する

–構造化

【Excel】【Google Spreadsheet】


(3/5) データ分析

整形したデータを分析し、ファクトを抽出する

– “ビッグデータ分析”

【PAAS】

–複数のデータセットを組み合わせた高度な分析

【R】【Tableau】【MySQL/PostgreSQL】【Ruby】

–データ可視化 (一覧化、グラフ化、地図へのマッピングなど) による傾向の分析

【Google Maps】【Google Fusion Table】


(4/5) ファクト活用

抽出したファクトを、読者にとって分かり易い、読者の興味を惹く形式に変換する

–抽出したファクトをもとにニュースを書く (ストーリーテリング)

–抽出したファクトをビジュアライズ (可視化) する

–抽出したファクトをもとにニュースアプリを構築する

【jQuery】【D3.js】【Google Charts】


(5/5) インタラクション


読んでもらう、使ってもらう

–配信して終わり、ではない

–いかに読んでもらうか、いかに使ってもらうかを考え、そのための仕組みを用意する

【Twitter】【Facebook】


本日のまとめ

• データジャーナリズムとは？

–データからニュースを発見し、分かりやすく伝える手段

• データジャーナリズムの特徴

–ジャーナリストだけでは実践できない

• データジャーナリズム実践の肝

– コストを掛けず、小さく実践


実践レポート


ジャーナリストキャンプ

• 2013年5月4日、福島県いわき市にて

• 取材の腕を競い合うイベント

• 会社・職種の枠を超えた15人が参加

• データジャーナリズムを結成して挑戦



データジャーナリズムチーム

• 新聞社デスク from 東京

–主に記事執筆担当、影のデスク

• 新聞社若手記者 from 大阪

–主に取材担当

• 大学教員（アナリスト） from 大阪

–主にデータ分析担当

• 通信社エンジニア from 東京

–主にデータ可視化担当、デスク


テーマ

データに反映されたファクトから「福島」に関する新たなニュースを

見つけられないか？


活動概要

• 2013年4月結成

• キャンプ前はメール、オンライン会議 (GoogleハングアウトやSkype) でコミュニケーション、この段階ではテーマは決まらず

• キャンプ中にテーマを「風評被害がないことをデータで証明すること」に決める

• キャンプ後、100通を超えるメールのやりとり

• 7月8日、記事を配信



2013/12/14 56

特設サイトを用意


活用したデータ

• 東京都中央卸売市場の農産品卸売データ

• 福島県が公開している農産品シェアに関するデータ

• いわき市が公開している農産品消費に関するデータ

• 消費者庁が公開しているアンケートデータ


活用したツール

• データの分析– Microsoft Excel

• データの可視化– Google Public Data Explorer (無料!)

– Google Charts (無料!)

• データの公開– Google Spreadsheet (無料!)

• 特設サイトの構築– Twitter Bootstrap (無料!)


読者の反応①


読者の反応②


読者の反応③



2013年12月27日!

ご清聴ありがとうございました


事例集


2013/12/14

先進事例


2013/12/14 66

http://www.nytimes.com/newsgraphics/2013/08/18/reshaping-new-york/



2013/12/14 67

http://www.nytimes.com/projects/2012/snow-fall/



2013/12/14 68

http://www.theguardian.com/world/interactive/2013/may/26/firestorm-bushfire-dunalley-holmes-family



2013/12/14 69

http://connectedchina.reuters.com/


http://connectedchina.reuters.com/

2013/12/14 70

<事例紹介>行政を動かした

1枚の地図


ワシントン州のメタドン薬害禍-概要-

• 英題“Methadone and the Politics of Pain”

• 米シアトルタイムスのスクープ

• ワシントン州が医療費を節減するため安価な一方で副作用の強い合成鎮痛剤「メタドン」を多用、貧困地域を中心に8年間で2000人以上が亡くなっていた事実を掘り起こした

• 最終的には行政を動かした


ワシントン州のメタドン薬害禍-経緯-

• 2010年末、医療関係者から「メタドンの副作用で死亡するケースが多い」とのタレこみ (端

緒・テーマ設定)

• 公共機関が公開している複数のデータセット及び文書の調査を開始 (データ収集・分析)

• 調査結果を元に100人以上の関係者へインタビューを実施 (裏取り)

• 調査結果を公開 (発表)




2013/12/14

世界に広がるデータジャーナリズム－DJA2013から－


議員の出費の可視化@アルゼンチン

• アルゼンチンの新聞社 (LA NACION) によるプロジェクト

• 膨大な量の紙 (PDF) に記載されていた議員の出費に関するデータを抽出し、データベース化

• データ分析結果をもとに、二重請求や、高額出費をスクープ

• DJA2013データ駆動調査報道部門賞 (大規模メディア部門) を受賞


2013/12/14 77

http://blogs.lanacion.com.ar/ddj/data-driven-investigative-journalism/argentina-senate-expenses/


http://blogs.lanacion.com.ar/ddj/data-driven-investigative-journalism/argentina-senate-expenses/

全高校の学力の可視化@コスタリカ

• コスタリカの新聞社 (La Nación) によるプロジェクト

• 国内にある全ての高校の学力を、国内最高の大学 (UCR) への進学者数をもとに可視化

• 調査を進め、私立学校と公立学校、都市部と地方の進学率の差を数値で示した



福島原発事故による避難者を可視化@スイス

• スイスの新聞社 (Neue Zürcher Zeitung) によるプロジェクト

• 福島県と東京電力から取得したデータをもとに、福島県からの避難者数と避難先を可視化

• 避難者のインタビュー記事も掲載


2013/12/14 81

http://fukushima.nzz.ch/


http://fukushima.nzz.ch/

南海トラフ地震の影響を可視化@日本 (朝日新聞)

• 南海トラフ地震が発生した際に予想される津波の高さや、人的被害・建物被害の規模を可視化

• ニュースアプリも用意され、住所を入力することで、特定地域の被害予想も確認できる


2013/12/14 83

http://www.asahi.com/special/nankai_trough/


http://www.asahi.com/special/nankai_trough/

ProPublica

• アメリカの調査報道専門のNPO

• 設立から5年でピューリッツアー賞を2度受賞

• “テクノロジーを活かした” 取り組み

– Tools & Data

– MuckRead

– Nard Blog

– P5 (The ProPublica Pair Programming Project)


2013/12/14 85

体制@ProPublica

<News Room (37+)>

編集チーム

C.A.R.チーム(2)

ニュースアプリケーションチーム(4)

フェロー(3)


進むコラボレーション

• データジャーナリズムの専門チームを設置

• “ハッカー” の採用を促進

• 外部協力者 (研究者・専門家) の拡充

• 同業/異業種間のコラボレーション


<ご参考> リンク集

<事例紹介>変わらなかった銃社会

■銃に囲まれた生活 (lohud.com)

http://www.lohud.com/interactive/article/20121223/NEWS01/121221011/Map-Where-gun-permits-your-neighborhood?gcheck=1

■銃の使われ方 (The Washington Post)

http://www.washingtonpost.com/sf/feature/wp/2013/03/22/gun-deaths-shaped-by-race-in-america/

■銃が奪った人生 (The Guardian + Periscopic)

http://guns.periscopic.com/?year=2013

■それでも変わらなかった議会 (ProPublica)

http://projects.propublica.org/guns/

<その他参考リンク>

■データジャーナリズムアワード

http://www.globaleditorsnetwork.org/dja/

■ハンスロスリング氏の動画

http://www.youtube.com/watch?feature=player_embedded&v=jbkSRLYSojo

■インフォグラフィックのデータベース「visual.ly」

http://visual.ly/

■シアトルタイムズによる薬害禍報道 (データジャーナリズム実践事例)

http://seattletimes.com/flatpages/specialreports/methadone/methadoneandthepoliticsofpain.html

■最近の凄い事例① Reshaping New York by The New York Times


■最近の凄い事例② Snow Fall by The New York Times


■最近の凄い事例③ Firestorm by The Guardian



http://www.lohud.com/interactive/article/20121223/NEWS01/121221011/Map-Where-gun-permits-your-neighborhood?gcheck=1

http://www.washingtonpost.com/sf/feature/wp/2013/03/22/gun-deaths-shaped-by-race-in-america/

http://guns.periscopic.com/?year=2013

http://projects.propublica.org/guns/

http://www.globaleditorsnetwork.org/dja/

http://www.youtube.com/watch?feature=player_embedded&v=jbkSRLYSojo

http://visual.ly/

http://seattletimes.com/flatpages/specialreports/methadone/methadoneandthepoliticsofpain.html




Technology

データジャーナリズム―異業種のコラボレーションがニュースを変える― (2013年12月)