【感想】ビッグデータの衝撃

ビッグデータの衝撃
巨大なデータが戦略を決める

著：城田　真琴

本書のテーマはビッグデータをどう活用すれば、大きな価値を生み出すことができるかというものです。

ビッグデータとは、既存の一般的な技…術では、管理するのが、困難な大量のデータ群であるといっています。

それは、数値データなどの構造化されたデータではなく、ウェブのクリックストリームデータ、ＳＮＳのソーシャルデータ、センサーデータなどの従来からのＲＤＢに収まらない非構造化データなどです。

気になったのは、以下です。

■ビッグデータとはなにか

・特性
　①大容量
　②多様性
　③速度（発生頻度、更新頻度）

・ビッグデータを取り扱うツール、フレームワーク群
　①Ｈａｄｏｏｐ（ハドゥープ）
　②ＮｏＳＱＬＤＢ
　③機械学習、統計解析

・なぜ今ビッグデータなのか
　①ビッグデータの民主化：ＳＮＳなどのテキストデータのマイニング
　②ハードウェアの性能向上、ソフトウェア技術の進化
　　コンピュータの高速化、ディスク価格の下落、Ｈａｄｏｏｐ
　③クラウドの普及

・取引データ（トランザクションデータ）から、ウェブデータなどの相互作用・交流データの分析へ
・Ｏ２Ｏなど、オンラインとオフラインの融合、購買行動の把握

■ビッグデータを支える技術

・Ｈａｄｏｏｐ（ハドゥープ）は、以下の３点から構成される
　①ＨＤＦＳ：分散ファイルシステム
　②Ｈａｄｏｏｐ　ＭａｐＲｅｄｕｃｅ　：フレームワーク
　③Ｈｂａｓｅ：巨大なデータベース

・ＮｏＳＱＬＤＢ 大量アクセスによるパフォーマンス低下が少ない、ＲＤＢではないＤＢ

・ストリームデータ処理　リアルタイムデータ処理

■ビッグデータを武器にする企業

（海外）

・アマゾンに代表されるイーコマース企業　⇒　購買履歴、クリックストリームデータ

・グーグル　検索ログ、統計的学習手法

・イーベイ　オークション

（国内）

・コマツ　機械の稼働管理、故障

・リクルート　売上管理　メルマガのアクセスログ

・マクドナルド　購買履歴

■ビッグデータの活用パターン

・購買履歴をもとに、最適商品をお勧めする

・ＧＰＳを利用したマーケティング

・不正検出

・顧客離反分析

・故障予測、異常検知、渋滞予測、電力需要予測

・サービス向上

・コストの最適化シミュレーション

・ビッグデータの活用レベル

　①データ収集：過去・現状の把握　ＳＭＳ，クリック履歴、Ｍ２Ｍ、ＩｏＴ
　②パターンの発見　クロスセル、データマイニング
　③予測
　④最適化

■ビッグデータ時代のプライバシー

・消費者プライバシー
・データ保護
・ライフログ

■オープンデータ時代の幕開けとデータマーケットプレイスの勃興

・外部更改データ活用　ＬＯＤ

・オープン・ガバメントとＩ／Ｆの公開

・データマーケットプレイス
　①課金、②認証、③データフォーマット管理、④サービス管理

■ビッグデータ時代への備え

・データ・アグリゲータ　データ収集、分析、最適化などの仲介を行う、データのプラットフォーマ

・データサイエンティスト

　スキル
　①コンピュータサイエンス
　②数学、統計、データマイング
　③データの可視化

　資質
　①コミュニケーション能力
　②起業家精神
　③好奇心

目次
第１章　ビッグデータとは何か
第２章　ビッグデータを支える技術
第３章　ビッグデータを武器にする企業　欧米企業編
第４章　ビッグデータを武器にする企業　国内企業編
第５章　ビッグデータの活用パターン
第６章　ビッグデータ時代のプライバシー
第７章　オープンデータ時代の幕開けとデータマーケットプレイスの勃興
第８章　ビッグデータ時代への備え

ISBN：9784492580967
出版社：東洋経済新報社
判型：4-6
ページ数：312ページ
定価：1800円（本体）
発売日：2012年07月12日続きを読む

●「『ビッグデータ』とは単にデータ量の増加だけを指すものではない。重要なのは、これまで無視してきたデータの価値に気づくことだ」。昨今のビッグデータを取り巻く環境の変化やビッグデータの活用について考える…上で、筆者のこの主張は非常に興味深い。
●正直なところ、この本を読むまで、ビッグデータというのは消費者からネットや販売履歴等を通して、様々なデータを集めて、うまい具合にビジネスに活かすくらいの認識しかなかった。ところが、そんな単純な話ではなく、このビッグデータというものはそれこそ生活の有様や企業の在り方すら変えてしまいかねない大きな可能性に満ちていることがわかった。一見、データやITとは無縁そうな企業でも、ビッグデータを活かし、新たなビジネスチャンスを獲得しているとは、中々驚きである。続きを読む

『クラウドの衝撃』の著者が「ビッグデータ」について解説したもの。
イーベイ、ジンガ、セントリカなどの海外の事例のほか、コマツ、リクルート、マクドナルドなどの国内事例が豊富に紹介されていて、ビッグデータ…の活用・取り組みについて理解が進んだ。先日読んだ原田氏の著書でもマクドナルドでのクーポン配信が重要だというのは認識していたが、本書によれば、２００４年以降、３００億円を投じたとのことで、その重要性を再認識させられた。続きを読む

いまの世の中は、インターネットをベースに、様々なデータが飛び交っている。
「ビックデータ」とは、よくぞ名付けたものです。
ビックデータに関する知識、ビックデータに着目した最新のビジネスモデルや注目企業…の紹介など、興味深く読ませてもらいました。
ハドゥープ(Hadoop)なんてキーワード、初めて聞きました。
(お恥ずかしい…笑)
さらにこれからビックデータを担う人材は、コンピュータサイエンスや統計知識、分析スキルなど、文系ビジネススキルだけではなく、理系のバックグランドを有する「データサイエンティスト」が必要だとのこと。
そして、この手の話が最近多いけれど、この分野に関しても日本は世界より遅れていると……。
しかし、本当に恐ろしい時代になってきたものだと感心しました。
まだまだＩＴは進化していきますね。
しかし"統計知識"と聞くと、やっと自分の時代になってきたかなぁ(笑)続きを読む

ビッグデータとは、3Ｖ(volume, variety, velocity)の面で管理が困難なデータ。データ分析ツールとして、ハドゥープの徹底活用してデータドリブンの世界を描く。