私はいつも、データはあらゆるところにあり、その多くは無料だと伝えています。企業はビッグデータ分析を始める前に、必ずしも自社で巨大なデータリポジトリを構築する必要はありません。企業や政府が大量の情報を公開する取り組みによって、膨大なデータを誰もが利用できるようになりました。
大手の優良企業からごく小規模なスタートアップまで、あらゆる企業が今、かつてないほど多くのデータを活用できます。ビッグデータへの取り組みに使える優れたデータソースを教えてほしいと、多くのクライアントから尋ねられます。そこで、現在利用できる無料のビッグデータソースをいくつかご紹介します。
Data.gov
米国政府は昨年、すべての政府データをオンラインで無料公開すると約束しました。このサイトはその第一段階であり、気候から犯罪まで、あらゆる分野の素晴らしい情報へのポータルとなっています。確認するには、 こちらをクリックしてください。
米国国勢調査局
人口、地理、教育に関するデータなど、米国市民の暮らしに関する豊富な情報があります。確認するには、こちらをクリックしてください。確認するには、 こちらをクリックしてください。
欧州連合オープンデータポータル
上記と同様ですが、欧州連合の機関によるデータに基づいています。確認するには、こちらをクリックしてください。
Data.gov.uk
英国政府のデータを掲載しており、1950年以降の英国の書籍・出版物すべてに関するメタデータである英国全国書誌も含まれています。確認するには、 こちらをクリックしてください。
CIAワールド・ファクトブック
267か国の歴史、人口、経済、政府、インフラ、軍事に関する情報です。確認するには、 こちらをクリックしてください。
Healthdata.gov
米国の医療に関する125年分のデータを掲載しており、請求レベルのメディケアデータ、疫学、人口統計が含まれます。確認するには、 こちらをクリックしてください。
NHS保健・社会福祉情報センター
英国国民保健サービスの医療データセットです。確認するには、 こちらをクリックしてください。
Amazon Web Servicesの公開データセット
公開データの膨大な情報源です。人間の遺伝情報に関する最も包括的なデータベースの構築を目指す1000 Genomes Projectや、地球の衛星画像に関するNASAのデータベースなどが含まれます。確認するには、 こちらをクリックしてください。
Facebook Graph
ユーザーのFacebookプロフィール情報の多くは非公開ですが、そうでない情報もたくさんあります。Facebookは、ユーザーが世界と共有することを望んでいる膨大な情報(あるいはプライバシー設定の仕組みが分からず隠せていない情報)を照会する方法として、Graph APIを提供しています。確認するには、 こちらをクリックしてください。
Gapminder
世界保健機関や世界銀行などの情報源からデータを集めたもので、世界各地の経済、医療、社会統計を網羅しています。確認するには、 こちらをクリックしてください。
Google トレンド
2004年以降の任意の検索語について、検索量(検索総数に占める割合)の統計を確認できます。確認するには、 こちらをクリックしてください。
Google Finance
40年分の株式市場データをリアルタイムで更新しています。確認するには、 こちらをクリックしてください。
Google Books Ngrams
Google Booksプロジェクトの一環としてデジタル化された数百万冊の書籍について、全文を検索・分析できます。確認するには、 こちらをクリックしてください。
米国国立気候データセンター
米国国立気候データセンターが提供する、環境、気象、気候に関する膨大なデータセットです。世界最大の気象データアーカイブです。確認するには、 こちらをクリックしてください。
DBPedia
Wikipediaは、あらゆるテーマに関する数百万件の構造化・非構造化データで構成されています。DBPediaは、誰もがこのデータを分析できるよう、公開・自由配布可能なデータベースを構築し、目録化する野心的なプロジェクトです。確認するには、 こちらをクリックしてください。
Topsy
包括的なソーシャルメディアデータを無料で入手するのは困難です。結局のところ、大手企業(Facebook、Twitterなど)はデータから利益を得ているため、無償で提供したくないのです。しかしTopsyでは、2006年までさかのぼる公開ツイートの検索可能なデータベースに加え、会話を分析するための複数のツールを利用できます。確認するには、 こちらをクリックしてください。
Likebutton
Facebookの公開データを世界規模および自分のネットワークから収集し、今、人々が何に「いいね!」しているかを概観できます。確認するには、 こちらをクリックしてください。
ニューヨーク・タイムズ
1851年までさかのぼるニュース記事の検索可能な索引付きアーカイブです。確認するには、こちらをクリックしてください。
Freebase
人、場所、物に関する構造化データをコミュニティが編集して作るデータベースで、4,500万件を超える項目を収録しています。確認するには、 こちらをクリックしてください。
Million Song Data Set
100万曲を超える楽曲のメタデータです。Amazon Web Servicesの一部です。確認するには、 こちらをクリックしてください。
この記事は LinkedInとの協力により掲載されています。掲載は、世界経済フォーラムが見解を支持することを意味しません。
フォーラム:Agendaの最新情報を受け取るには、 週刊ニュースレターに登録してください。
著者:Bernard Marrは、戦略、パフォーマンス管理、分析、KPI、ビッグデータの分野で世界的に認められた専門家です。
画像:2014年7月31日、ベルリンでノートパソコンにUSB機器を差し込む様子。REUTERS/Thomas Peter。
