統計学を哲学する « 名古屋大学出版会

2020/09/11 215 users 統計学 名古屋大学出版会 因果推論 浮き彫り 枠組み

内 容 統計学は実験や臨床試験、社会調査だけでなく、ビッグデータ分析やAI開発でも不可欠である。ではなぜ統計は科学的な根拠になるのか？　帰納推論や因果推論の背後に存在する枠組みを浮き彫りにし、科学的認識論としてデータサイエンスを捉え直す。科学と哲学を架橋する待望の書。 目 次 序　章　統計学を哲学する？... 続きを読む

都内住宅街のスーパーや公園 人出減らず ビッグデータ分析 | NHKニュース

2020/05/04 169 users 人出 自粛 繁華街 新型コロナウイルス 一方

新型コロナウイルスの感染拡大で、外出の自粛が呼びかけられ、各地の繁華街では人出が大幅に減少しています。その一方で、東京都内の住宅街にあるスーパーや公園の周辺10か所について、ビッグデータを利用して分析したところ、先月７日に緊急事態宣言が出されたあとも、いずれの場所でも人出が大きく減っていないことが... 続きを読む

都内の公園 緊急事態宣言後 人出増加の所も ビッグデータ分析 | NHKニュース

2020/04/19 662 users 人出増加 緊急事態宣言後 NHKニュース 公園 Agoop

不要不急の外出の自粛が呼びかけられる中、東京都内の公園では、今月７日に緊急事態宣言が出されたあとも人出が増加している場所があることがビッグデータの分析で分かりました。 インターネットのＳＮＳで人が集まっていると投稿されている公園や観光地で、ＮＨＫは、ＩＴ関連企業の「Ａｇｏｏｐ」が携帯電話の利用者の... 続きを読む

出勤者７割減 ビッグデータ分析では５割減にも届かず | NHKニュース

2020/04/13 169 users ５割減 NHKニュース 出勤者７割減

政府の緊急事態宣言を受けて東京都心を訪れる人の数は大幅に減っていますが、平日だった今月10日のビッグデータからは、出勤者が７割減るまでには、なお距離がある現状も見て取れます。 それによりますと、緊急事態宣言のあとの今月10日に東京23区を訪れた人の数は合わせて185万9000人でした。 これは１週間前、宣言が出... 続きを読む

『ビッグデータ分析・活用のためのSQLレシピ』はデータ分析でSQLクエリを叩く人なら必読の黒魔術大全 - 六本木で働くデータサイエンティストのブログ

2017/04/12 485 users SQLクエリ 必読 SQLレシピ 六本木 SQL

2017 - 04 - 12 『ビッグデータ分析・活用のためのSQLレシピ』はデータ分析でSQLクエリを叩く人なら必読の黒魔術大全 書籍 書評 SQL データ分析 こちらの本をご恵贈いただきました。 ビッグデータ分析・活用のためのSQLレシピ 作者: 加嵜 長門 ,田宮直人 出版社/メーカー: マイナビ出版 発売日: 2017/03/27 メディア: Kindle 版 この商品を含むブログを見る ... 続きを読む

TOKIOとミスチル、矢沢永吉と郷ひろみの意外な類似性 ～16万曲の歌詞を分析・可視化してみた～ - ビッグデータレポート - ヤフー株式会社

2016/09/05 295 users GyaO ミスチル 矢沢永吉 データビジュアライズ TOKIO

こんにちは、「Yahoo! JAPANビッグデータレポート」チームです。 突然ですが、もしも気になるアーティストの歌詞にはどんな特徴があるのかが可視化されたら面白いと思いませんか？そこで今回は普段のビッグデータ分析と趣を変えて、 GYAO!の歌詞サービス と連携し歌詞の日本語処理分析とその結果のデータビジュアライズに取り組んでみました。 ちなみに GYAO!の歌詞サービス では様々なジャンルの歌詞... 続きを読む

第1回　ビッグデータ分析を始めよう：これなら使える！ビッグデータ分析基盤のエコシステム｜gihyo.jp … 技術評論社

2015/09/07 52 users gihyo.jp ビッグデータ分析基盤 エコシステム 第1回

ビッグデータ分析エンジンを比較してみると，ビッグデータを処理する一般的なインターフェースとしてSQLが提供されていることが主となっています。こうして見ると，最近流行っているビッグデータを使った分析とは，SQLによる分析が主となっていることがわかります。 さらに，他の機能を見てみると，スケジューリングや依存関係を考慮したジョブの実行，データの可視化などは分析エンジン自体は備えておらず，別途用意する利... 続きを読む

リクルートからMITへ。ビッグデータ分析により人間の意思決定メカニズム解析に挑む数原良彦氏 - エンジニアtype

2015/05/15 173 users MIT エンジニアtype スタンフォード大学 リクルート

トップページ > 旬ネタ > リクルートからMITへ。ビッグデータ分析により人間の意思決定メカニズム解析に挑む数原良彦氏 リクルートホールディングスは2015年4月1日、新規事業開発機関「Recruit Institute of Technology」を人工知能の研究所として再編したと発表した。一方では米MITメディアラボとスタンフォード大学に客員研究員を派遣するなど、R&D拡張の動きが活発だ。 ... 続きを読む

フリーのVM環境を使って、ビッグデータ分析の学習環境をすばやく構築する （1/3）：CodeZine

2015/04/24 263 users CodeZine RDBMS Hadoop VM環境 起動

この連載では、フリーのVM環境「Cloudera Quick Start VM」を使って、ビッグデータ分析に必要な各種技術（データの取込み、非構造化データの分析、機械学習、全文検索など) を学習します。この連載を読むことで、ビッグデータ分析基盤に必要な基礎技術を学ぶことができます。第1回では、VM環境のダウンロードと起動、RDBMSからHadoopへのデータのインポート、Hadoop上でのテーブル... 続きを読む

ついに人工知能が銀行員に「内定」　IBMワトソン君　　：日本経済新聞

2015/03/22 355 users 内定 人工知能 ワトソン ワトソン君 銀行員

人の言葉を理解する米ＩＢＭの認知型コンピューター「ワトソン」。米国生まれで母国語は英語だが猛勉強によって日本語を習得し、三井住友銀行から「内定」を得た。クイズ番組に興じていたワトソン君が、年内にも銀行マンとして日本で働き始める。■ビッグデータ分析などで質問の答えを導き出す三井住友銀行はコールセンターでの問い合わせ対応にワトソンを活用する　「ＡＴＭの手数料を知りたいのですが」。銀行のコールセンターに... 続きを読む

IoTとビッグデータで何ができるか--世界の活用事例10選 - ZDNet Japan

2015/03/11 75 users IoT センサ つきもの アルゴリズム デバイス

モノのインターネット（IoT）に関する話題に、ビッグデータの話はつきものだ。ネットワークに接続されたデバイスやセンサ、アルゴリズムを活用しようとすれば、大量のデータを扱う必要が出てくる。 Forrester ResearchのアナリストBrian Hopkins氏は、「モノのインターネットが成功するか失敗するかは、ビッグデータ分析にかかっている」と述べている。 IoTへの取り組みを始める時には、I... 続きを読む

【翻訳】開発者がビッグデータ分析にPythonを使う時によくやる間違い | POSTD

2015/02/27 441 users DevOps POSTD チューリッヒ Python 習得

システムの構築、新しい技術の習得、PythonやDevOpsなどに情熱を注ぐソフトウェア開発者です。現在はチューリッヒを拠点とするビッグデータのスタートアップで働いており、データ分析およびデータ管理ソリューションのための […]システムの構築、新しい技術の習得、PythonやDevOpsなどに情熱を注ぐソフトウェア開発者です。現在はチューリッヒを拠点とするビッグデータのスタートアップで働いており、... 続きを読む

CoreOSとDockerの上でビッグデータ分析の敷居をフロントエンドプログラマ向けに低くするPachyderm - TechCrunch

2015/01/24 65 users TechCrunch 敷居

大量のデータを集めてそれを分析するときは、MapReduceと呼ばれる技法を使うのが、最近の定石だ。具体的には、それを実装しているApacheのHadoopというフレームワークを利用する。それはすでに評価が確立している方法だが、簡単ではない。主にJavaで書かれているHadoopは、使い方が難しい、と評価されている。 本格的にデータ分析をやろうという気になった企業はHadoopとMapReduce... 続きを読む

企業のITを変えた10のトレンド - TechCrunch

2014/10/21 67 users TechCrunch Byers 筆者 トレンド 革命期

[筆者: Matt Murphy] 編集者注記: Matt MurphyはKleiner Perkins Caufield & Byersの社員パートナーで、主にモバイルとクラウドインフラ方面の投資を担当している。 企業のITは今、大きな革命期を迎えている。 企業が情報技術を買う、構築する、管理する、その安全対策をするやり方が、今、完全に変わりつつある。クラウドコンピューティングとビッグデータ分析... 続きを読む

ニュース - グーグル、MapReduce後継のビッグデータ処理サービス「Cloud Dataflow」を発表：ITpro

2014/06/26 67 users Cloud Dataflow MapReduce グーグル

米グーグルは2014年6月25日（米国時間）、ビッグデータ分析のクラウドサービスである「Google Cloud Dataflow」を発表した。グーグルの並列データ処理技術「MapReduce」の後継技術をベースにしたサービスで、バッチ処理だけでなくストリーム処理やリアルタイム処理を実行できることが特徴。25日から同社が米国サンフランシスコ市で開く開発者会議「Google I/O 2014」で発表... 続きを読む

ビッグデータ分析で、中国政府による検閲の中身が明らかに：日経ビジネスオンライン

2014/02/02 301 users 検閲 広野 聞き手 彩子 中身

ビッグデータ分析がビジネスの世界で広がる中、アカデミアの世界にも大きな影響を及ぼしている。このほど、最新のビッグデータ分析手法を開発し、中国政府の検閲の実態について分析した計量政治学者であるゲイリー・キング米ハーバード大学教授に、研究が実現した背景などについて聞いた。 （聞き手は広野 彩子） 最先端のデータ分析手法を使って、政治に関するデータ分析したそうですね。なぜ政治学で定量的な分析が急速に発展... 続きを読む

雑踏でも瞬時に顔認証　ＮＥＣ、ビッグデータ分析10倍速く　　：日本経済新聞

2013/10/08 66 users 小売店 雑踏 サーバー 従来 スーパーコンピューター

ＮＥＣは2013年度中にも、混み合う店内で瞬時に得意客の来店を把握できる顔認識サービスを始める。小売店の接客向上ニーズなどを見込む。膨大な画像情報などを処理するビッグデータ分析が従来より10倍以上速くできるソフトを開発した。スーパーコンピューターで培った通信技術などを活用し、データ処理速度を高めた。 店舗に備え付けたカメラで撮影した来店客一人ひとりの顔をＮＥＣが大量のサーバーで高速に分析する。過… 続きを読む

Google調査「ネット選挙は空振り」 ビッグデータ分析で参院選を総括

2013/07/30 60 users 空振り JST 総括 Daichi Ito 参院選

Google調査「ネット選挙は空振り」 ビッグデータ分析で参院選を総括 The Huffington Post |  執筆者： Daichi Ito 投稿日: 2013年07月30日 14時07分 JST  |  更新: 2013年07月30日 14時23分 JST メルマガ登録: メルマガ登録 フォロー: Google, Google ネット選挙, グーグル, テクノロジー, ネット選挙, ネッ... 続きを読む

ビッグデータ分析 人材育成へ　NHKニュース

2013/07/16 151 users 人材育成 NHKニュース カーナビ 統計学者 IC乗車券

人の行動や買い物の記録などを集めた膨大な情報いわゆる「ビッグデータ」を、ビジネスなどに活用する動きが強まっています。 しかし、国内にはこうしたデータを分析できる専門家が少ないことから、国内の統計学者や企業が１６日、人材育成のための新たな団体を設立しました。 スマートフォンやＩＣ乗車券、カーナビなどの普及で、いわゆる「ビッグデータ」をビジネスに活用する動きが広がっていますが、国内には、こうしたデータ... 続きを読む

日立が「スイカ」履歴を元にマーケティング情報販売　ビッグデータ分析で （産経新聞） - Yahoo!ニュース

2013/06/27 138 users スイカ 日立 Yahoo 日立製作所 産経新聞

日立製作所は２７日、ＪＲ東日本のＩＣ乗車券「Ｓｕｉｃａ（スイカ）」の履歴情報などを利用したマーケティング情報提供サービスを７月１日から開始すると発表した。発行枚数４２９８万枚に及ぶスイカの情報を「ビッグデータ」として分析し、駅周辺に展開する事業者に提供する。 新たなサービスは、駅利用者の性別年代構成のほか、利用目的や滞在時間、乗降時間帯などを収集し、それぞれのデータに分析を加えた月１回のリポートを... 続きを読む

「ビッグデータ分析でスマホの接続率を改善」孫社長が明かす、ソフトバンクのビッグデータ活用法。Oracle CloudWorld Tokyo 2013 － Publickey

2013/04/09 95 users オラクルCEO ラリー・エリソン氏 基調講演 クラウド 国内

「ビッグデータ分析でスマホの接続率を改善」孫社長が明かす、ソフトバンクのビッグデータ活用法。Oracle CloudWorld Tokyo 2013 日本オラクルとしては国内で始めてクラウドにフォーカスしたプライベートイベントとなったOracle CLoudWorld Tokyo 2013。オラクルCEO ラリー・エリソン氏の基調講演に続いて登壇したのは、ソフトバンク代表取締役社長 孫正義氏。 ス... 続きを読む

Amazon Redshift はビッグデータ分析を変えるのか

2013/03/11 159 users Amazon Redshift

編集部注: この記事はシリコンバレーでHapyrusを起業した藤川幸一（@fujibee）によるゲスト記事である。Hapyrusはクラウド上のビッグデータのためのウェブサービスを提供する会社で、500startupsや日本の有名な複数のエンジェルから投資を受けている。 昨年11月にAmazon Web Services（以下AWS）が初めてのユーザーカンファレンスre:InventでAmazon ... 続きを読む

ビッグデータ分析の現場実践本がやっと出た–O’ReillyのBad Data Handbook

2013/03/01 67 users O’Reilly

ビッグデータはまだまだ難しくてよく分からない、と一般には受け取られているが、それも当然だ。その複雑さをシンプルに抽象化するやり方の例はいくつかあるが、しかしデータサイエンティストたちの話を聞いても、彼らですら、スプレッドシートに毛の生えた程度のものを見るだけのために、いまだにツールの勉強に苦労している、と言う。 フリーのデータサイエンティストMarck Vaismanが、あるインタビューで言ってい... 続きを読む

報道発表資料 : ビッグデータのリアルタイム処理を可能にする大規模データ分析基盤技術を世界に先駆けて開発 | NTT

2011/10/26 54 users NTT 株式会社プリファードインフラストラクチャー 西川

日本電信電話株式会社（東京都千代田区、代表取締役社長：三浦　惺、以下「NTT」）と株式会社プリファードインフラストラクチャー（東京都文京区、代表取締役社長：西川　徹、以下「PFI社」）は、ビッグデータ*1と呼ばれる大規模データをリアルタイムに高速分析処理する基盤技術「Jubatus*2」（第1版）を開発しました。 直近の潮流変化を調べる等、対象データの新しさを意識したビッグデータ分析アプリケーショ... 続きを読む