全ての物語の6つの原型　データ分析から解明 - BBCニュース

2018/07/03 683 users 修士論文 原型 解明 人類学 分類

ミリアム・クイック、情報視覚化・データ分析ジャーナリスト 調査チームは1700作品もの小説を分析し、物語を6つのタイプに分類した。この分類は、世界中で愛されている作品にも当てはまるのだろうか。 米国の小説家カート・ボネガットは、自らの人類学の修士論文を「私が行った、文化に対する最も美しい貢献」と説明して... 続きを読む

全ての物語の6つの原型　データ分析から解明 - BBCニュース

2018/07/02 683 users 修士論文 原型 解明 人類学 分類

ミリアム・クイック、情報視覚化・データ分析ジャーナリスト 調査チームは1700作品もの小説を分析し、物語を6つのタイプに分類した。この分類は、世界中で愛されている作品にも当てはまるのだろうか。 米国の小説家カート・ボネガットは、自らの人類学の修士論文を「私が行った、文化に対する最も美しい貢献」と説明して... 続きを読む

【保存版】Pythonでデータサイエンスするための全体像と、必要な学習項目を初心者向けにまとめてみたよ！｜Dai｜note

2018/05/04 1125 users アウトプット ディープラーニング DAI もと データ分析

【保存版】Pythonでデータサイエンスするための全体像と、必要な学習項目を初心者向けにまとめてみたよ！ このnoteでは、データ分析をやってみたい人向けに、何を学んだらよいかまとめます。ちなみにこの記事では、「ディープラーニングで何かしたい！」みたいな人ではなく、「データをもとに有益なアウトプットを出せるようになりたい」という人向けの記事となっています。 データ分析の全体像 まず、データ分析を行... 続きを読む

データ分析で頻出のPandas基本操作 - Qiita

2018/04/16 516 users Qiita データ分析

はじめに 機械学習や深層学習が人気の昨今ですが、それらのモデルの精度に最もクリティカルに影響するのはインプットする データの質 です。データの質は、データを適切に把握し、不要なデータを取り除いたり、必要なデータを精査する 前処理 を行うことで高めることができます。 本頁では、データ処理の基本ツールとしてPandasの使い方を紹介します。Pandasには便利な機能がたくさんありますが、特に分析業務で... 続きを読む

データサイエンティストによる統計入門 ― k平均法でデータをクラスタリングしてみよう！ - エンジニアHub｜若手Webエンジニアのキャリアを考える！

2018/04/10 1276 users 主軸 エンジニアHub Tweet データサイエンティスト

2018 - 04 - 10 データサイエンティストによる統計入門 ― k平均法でデータをクラスタリングしてみよう！ ビッグデータ、データサイエンス、人工知能など、統計学を主軸においた分野が隆盛ですが、統計学には高いハードルを感じる方も少なくないでしょう。k平均法を実際に手を動かしながら理解することで、データ分析を身近に感じることができます。 データサイエンティスト 統計 Tweet はじめまして... 続きを読む

データサイエンティストを目指して勉強した1年間まとめ - Qiita

2018/04/05 645 users 前半 後半 データサイエンス 半年 ビジョン

はじめに 本記事では、データサイエンスについて学んだこと、データ分析業務に携わって、経験したこと、気付いたことをまとめています。特に、後半を中心にまとめています。前半についてはこちらの「 データサイエンティストを目指して半年で学んだことまとめ 」に書いています。ご興味があれば、読んでいただければと思います。 全ては ビジョン（あるべき/ありたい姿） を明確にしてから始まる データ分析で最も重要にな... 続きを読む

【Python】スクレイピング→データ収集→整形→分析までの流れを初心者向けにまとめておく ～Pythonに関するはてな記事を10年分スクレイピングし、Pythonトレンド分析を実際にやってみた～ -

2017/11/12 811 users スクレイピング Selenium Pytho pandas

やりたいこと はてなブックマークで、Python記事を検索しトレンドを分析 はてなブックマークにSeleniumでログイン ブックマーク数をスクレイピング 時系列比較を行う バズるタイトルを分析 実装方法 詳しくは下記記事を参考にしてください。Pandasを利用したデータ分析まで載せています。 【Python】スクレイピング→データ収集→整形→分析までの流れを初心者向けにまとめておく ～Pytho... 続きを読む

データサイエンティストもしくは機械学習エンジニアになるためのスキル要件とは（2017年夏版） - 六本木で働くデータサイエンティストのブログ

2017/06/25 1150 users 六本木 データサイエンティスト スキル要件 人材 統計学

2017 - 06 - 25 データサイエンティストもしくは機械学習エンジニアになるためのスキル要件とは（2017年夏版） データサイエンティスト データ分析 人材 統計学 機械学習 この記事は2年前の以下の記事のアップデートです。 前回はとりあえずデータサイエンティストというかデータ分析職一般としてのスキル要件として、「みどりぼん程度の 統計学 の知識」「はじパタ程度の 機械学習 の知識」「Rか... 続きを読む

データサイエンティストもしくは機械学習エンジニアを目指すならお薦めの初級者向け6冊＆中級者向け15冊（2017年春版） - 六本木で働くデータサイエンティストのブログ

2017/03/22 846 users 六本木 データサイエンティスト 機械学習エンジニア お薦め

2017 - 03 - 22 データサイエンティストもしくは機械学習エンジニアを目指すならお薦めの初級者向け6冊＆中級者向け15冊（2017年春版） 書評 書籍 統計学 機械学習 データ分析 データサイエンティスト 統計的因果推論 (Photo credit: https://pixabay.com/en/books-door-entrance-italy-colors-1655783/ ) この... 続きを読む

データ分析の誤りを未然に防ぐ！ SQL4つの検算テクニック | eureka tech blog

2016/12/17 3794 users 未然 eureka tech blog データ分析

この記事は Eureka Advent Calendar 2016 17日目 の記事です。 16日目は 海藤さん の「 pairsでKotlinを採用した5つの理由 」でした。 こんにちは、pairsのAnalyzeチームメンバーの大久保です！ Analyzeチームでは、施策検討時のデータ抽出やサービス上の問題検知のために、分析用途のMySQLクエリを作成しています。 分析用途のクエリを作成してい... 続きを読む

Excelデータベースの鉄則。分析はデータの下ごしらえで決まります - 実践で使うExcel・Accessの話

2016/10/23 848 users 下ごしらえ 無茶苦茶 鉄則 Excel list Tweet

2016 - 10 - 23 Excelデータベースの鉄則。分析はデータの下ごしらえで決まります list Tweet Excel でデータ分析にあたり一番大事なのが 「データの下ごしらえ」 です。「下ごしらえ」とは 「集計できる形にデータを整えること」 です。実践の場では、教科書のようにデータは美しく整っていません。はっきり言ってほとんどの場合、無茶苦茶、または変なデータが混ざっています。これを... 続きを読む

「人工知能」ブームに乗り遅れた！という方々に捧げる人工知能（機械学習）まとめ記事 - 東京で働くデータサイエンティストのブログ

2016/05/15 1099 users データサイエンティスト 人工知能 CC BY-SA ブーム

2016 - 05 - 15 「人工知能」ブームに乗り遅れた！という方々に捧げる人工知能（機械学習）まとめ記事 データ分析 ビジネス 機械学習 書籍 (Photo credit: A Health Blog via Visual Hunt / CC BY-SA ) 「 人工知能 」ブームが本格化してまだほんの数ヶ月だと思うんですが、気がついたらTV含む大手メディアが皆こぞって毎日のように「 人工知... 続きを読む

データ分析をやりたいエンジニアにおすすめ！Pythonの入門スライド11選

2016/04/18 610 users Python レバテックキャリア スキルアップ エンジニア

スキルアップ記事 レバテックキャリアではIT・Web業界のエンジニア、デザイナーのスキルアップに役立つコンテンツをお届けいたします。 転職に役立つノウハウから、日々のスキルアップや業務で使える記事等幅広く掲載していきます。 転職支援サービスをご希望の方はこちら データ分析を身につけてエンジニアとしてステップアップ データ分析をやりたいエンジニアにおすすめ！Pythonの入門スライド11選 Pyth... 続きを読む

「p値や有意性に拘り過ぎるな、p < 0.05かどうかが全てを決める時代はもう終わらせよう」というアメリカ統計学会の声明 - 東京で働くデータサイエンティストのブログ

2016/03/08 621 users 声明 データサイエンティスト 有意性 指摘 P値

2016 - 03 - 08 「p値や有意性に拘り過ぎるな、p < 0.05かどうかが全てを決める時代はもう終わらせよう」というアメリカ統計学会の声明 統計学 データ分析 以前から同様の指摘は様々な分野から様々な人々が様々な形で出してきていましたが、アメリカ 統計学 会が以下のような明示的な声明をこの3月7日（現地時間）に発表したということで注目を集めているようです。 AMERICAN STATI... 続きを読む

データサイエンティストを目指すというかデータ分析を生業にするなら読んでおきたい初級者向け5冊＆中級者向け12冊（2015年冬版） - 銀座で働くデータサイエンティストのブログ

2015/12/22 1012 users 生業 データサイエンティスト 銀座 統計学 機械学習

2015 - 12 - 22 データサイエンティストを目指すというかデータ分析を生業にするなら読んでおきたい初級者向け5冊＆中級者向け12冊（2015年冬版） 書籍 データサイエンティスト 統計学 機械学習 (Photo via VisualHunt ) 最近になってまた色々とデータサイエンティストを目指す人向けのお薦め書籍リストとか資料リストとかが出てきてるんですが、個人的には何かと思うところが... 続きを読む

「統計学と機械学習の違い」はどう論じたら良いのか - 銀座で働くデータサイエンティストのブログ

2015/09/17 623 users データサイエンティスト 銀座 統計学 機械学習 インタビュ

2015-09-17 「統計学と機械学習の違い」はどう論じたら良いのか 統計学 機械学習 データ分析 雑感 何かこんなメディア記事が出ていたようです。 これを読んで色々な人がツッコミを入れまくっている模様ですが、この記事の不思議なところは「完全に間違った説明というわけでもないのに何故か（両分野に詳しい）誰が読んでも猛烈な違和感を覚える」ところなんじゃないかなぁと。 正直、これはライター・インタビュ... 続きを読む

初心者でもほぼ無料でR言語を勉強できるコンテンツ10選 - paiza開発日誌

2015/06/04 767 users paiza開発日誌 R言語 谷口 プログラミング言語 初心者

2015-06-04 初心者でもほぼ無料でR言語を勉強できるコンテンツ10選 Photo by Alejandro Hurtadoこんにちは。谷口がお送りします。ITエンジニアの方の中には「R言語を学習したい」という方も多くいらっしゃるかと思います。R言語は、データ分析やデータ処理に特化したオープンソースのプログラミング言語です。システムを開発をする他のプログラムミング言語とは位置付けが異なり、統... 続きを読む

データサイエンティストというかデータ分析職に就くための最低限のスキル要件とは - 銀座で働くデータサイエンティストのブログ

2015/03/13 1375 users データサイエンティスト スキル要件 銀座 最低限 データ分析職

2015-03-13 データサイエンティストというかデータ分析職に就くための最低限のスキル要件とは データ分析 データサイエンティスト 人材 今からデータサイエンティストというかデータ分析者の職に就くには、緑本程度の統計学とはじパタ程度の機械学習の知識と、RかPythonでコードが組め、SQLが書ける、ぐらいが満たすべき最低ラインだと思われる— TJO (@TJO_datasci) 2015, 3... 続きを読む

言語処理100本ノック 2015

2015/03/12 1882 users 言語処理100本ノック コーパス 作法 題材 プログラミング

言語処理100本ノックの公式ウェブサイト言語処理100本ノックは，実践的な課題に取り組みながら，プログラミング，データ分析，研究のスキルを楽しく習得することを目指した問題集です 実用的でワクワクするような題材を厳選しました 言語処理に加えて，統計や機械学習などの周辺分野にも親しめます 研究やデータ分析の進め方，作法，スキルを修得できます 問題を解くのに必要なデータ・コーパスを配布しています 言語は... 続きを読む

Web業界からEC業界に行ってブチ当たった、皆が教えてくれない「EC業界の見えない壁」の正体を、もやっと掴めました！ - webディレクターのネタ帳

2015/01/03 643 users Webディレクター 正体 EC業界 ネタ帳 メンズファッション

2015-01-03 Web業界からEC業界に行ってブチ当たった、皆が教えてくれない「EC業界の見えない壁」の正体を、もやっと掴めました！ ビジネス データ分析 皆さん、あけましておめでとうございます！永上裕之です。 2015年は、引き続きメンズファッション＋と非モテ＋の運営を頑張っていきたいと思います。 2014年はweb業界とEC業界の違いを実感 昨年1年を振り返ると、2012年に始めたメンズ... 続きを読む

杜氏のいない蔵元が示した「データ分析さえすれば職人の技を職人抜きでも再現できる」という事実の凄み - 銀座で働くData Scientistのブログ

2014/10/31 598 users 蔵元 獺祭 Data Scientist 杜氏 旭酒造

2014-10-31 杜氏のいない蔵元が示した「データ分析さえすれば職人の技を職人抜きでも再現できる」という事実の凄み データ分析 ビジネス 先日、とあるコンサルの社長さんとお酒を飲みながらお話していて出てきた話題が「畢竟データ分析って何の役に立つんだろう？」というものだったんですが、そこで僕が思い出して紹介したのが「獺祭」で世界進出を成功させている旭酒造のエピソードだったのでした。 ということで... 続きを読む

連載・データサイエンティストの視点：「きのこの山」VS.「たけのこの里」戦争に決着!?　購買データ分析で“大差”あり - ITmedia ニュース

2014/02/04 556 users たけのこ 勝敗 大差 決着 論争

連載・データサイエンティストの視点：「きのこの山」VS.「たけのこの里」戦争に決着!?　購買データ分析で“大差”あり データ分析の専門家・データサイエンティストが身近な話題をテーマに分析結果を紹介していく本企画。第2回は、ネットでもしばしば論争を巻き起こす「きのこの山」「たけのこの里」の勝敗について。 続きを読む

そもそもビジネスの現場ではどういう「レベル」の統計学を使うべきなのか - 銀座で働くデータサイエンティストのブログ

2014/01/21 714 users 昨今 データサイエンティストブーム データサイエンティスト

2014-01-21 そもそもビジネスの現場ではどういう「レベル」の統計学を使うべきなのか データ分析 ビジネス 統計学 データサイエンティストブームが去りつつある一方で、データ分析ブームそのものはじわじわと広がり続けている感じのする昨今ですが。最近また、色々なところで「本当にビジネスやるのに統計学って必要なの？」みたいな話題を聞くことが増えてきたので、何となくざっくりまとめて書いてみました。 ち... 続きを読む

5分でわかるベイズ確率

2013/11/09 692 users Presentation Transcript 賭け 5分

5分でわかるベイズ確率 Presentation Transcript 5分でわかるベイズ確率 @hoxo_m 2013/11/09 自己紹介 • hoxo_m 某ECサイトでデータ分析をやっています • RPubsRecent RPubs の新着エントリを流す Twitter Bot 問題です 問い • ゆがみの無いコインを投げて、表が出る か裏が出るかで賭けをしています。 • このコインを3回... 続きを読む

データ分析の重要性を理解するための入門書５冊 - UNIX的なアレ

2013/02/10 580 users アレ データ分析 重要性 データマイニング 昨今

2013-02-10 データ分析の重要性を理解するための入門書５冊 data mining はじめに 今回紹介する本は玄人向けではなく「データ分析が重要そうだけど、なんだかよくわかんないと思っている人」向けです。 昨今ではデータマイニングという単語がエンジニアやマーケティング担当者のものだけでなく、経営レイヤーでも重要視されてきています。 ビッグデータというバズワード的なものも頻繁に言われ始めて、... 続きを読む