[Python]機械学習などでテキストデータを特徴量にする際のソースコード集 | かものはしの分析ブログ

2019/06/23 387 users パシ Python テキストマイニング 機械学習 GitHub

都内の事業会社で分析やWebマーケティングの仕事をしています。大学・大学院では経済学を通じて統計解析を行うなどしておりました。企業に勤めてからは、機械学習やテキストマイニング、クローリング技術などに関心を持っています。 Twitterアカウント Mr_Sakaue( SKUE ) GitHub 読書メーター ほしいものリスト テキスト... 続きを読む

Kaggleで使われた特徴量エンジニアリングとアルゴリズムまとめ | かものはしの分析ブログ

2017/07/23 110 users Kaggle テキストマイニング パシ クローリング技術 関心

都内の事業会社で分析やWebマーケティングの仕事をしています。大学・大学院では経済学を通じて統計解析を行うなどしておりました。企業に勤めてからは、機械学習やテキストマイニング、クローリング技術などに関心を持っています。 最近の投稿 Kaggleで使われた特徴量エンジニアリングとアルゴリズムまとめ 2017年7月23日 ベイジアンネットワークをRのbnlearnパッケージで推定して予測してみる 20... 続きを読む

40歳で成功するために、35歳から学び始める統計学 - RepoLog│レポログ

2017/03/07 342 users RepoLog│レポログ 遅咲き ヨメレバ 統計学 数学

2017 - 03 - 07 40歳で成功するために、35歳から学び始める統計学 教育レポート 数学・物理 遅咲きの成功者に学ぶ逆転の法則 posted with ヨメレバ 佐藤光浩 文響社 2016-06-01 Amazon 楽天ブックス 35才を過ぎ、「統計解析ができたらなぁ」と感じる場面に度々遭遇するようになりました。 少々遅いスタートかも知れませんが、「人生に遅すぎるはない！」という言葉を... 続きを読む

線形モデルによる文京区の賃貸物件価格の解釈（「最高の借家」は統計解析で見つかるか？）

2015/03/28 112 users 借家 Sat 線形モデル 解釈 文京区

Transcript 1. 3/28/15 線型モデルによる 文京区の賃貸物件価格の解釈 ̶「最高の借家」は統計解析で見つかるか？̶ 先行研究としてTokyo.R#37の安井さんの『Rでお部屋探し』と、 @berobero11さんの『データ解析で割安賃貸物件を探せ！（山手線沿線編）』を 参考にさせて頂きました。 1 @windfall_j 2015/03/28(Sat.) Tokyo.R 2. C... 続きを読む

【Rubyが好き】微積分や統計解析を快適に扱うDSL(gem)作ったヨ！ - Qiita

2014/05/26 158 users DSL Qiita gem 紙上 微積分

Rubyで微積分や統計解析を快適に扱うDSL作ったヨ！ rubygems.org github バグ報告を頂ければ２４時間以内に直します. このDSLで一番大事にしたのは、 微積分や極限、対数や三角関数などを紙上で数学をする感覚と同じ感覚で取り扱える事. わざわざRubyでやる必要、あったの...?（；゜０゜） 僕がこのDSLをRubyで作ったのにはいくつか訳があります. Rubyが好き MATL... 続きを読む

統計解析 & R言語 超初心者入門資料まとめ - 酒と泪とRubyとRailsと

2014/02/16 556 users 初歩 所存 スライド Rails モチベーション

興味を持ち続けていた統計解析や、R言語の勉強をはじめました！まだまだ初歩の初歩ですが、この記事がいつか偉大な一歩になれるように頑張っていく所存ですw まずは、R言語や統計解析に関する入門記事や、モチベーションがアップしそうな記事をまとめていきます！ [スライド] 統計学入門 統計学の全体像をつかむのに最適なスライドです。初歩。。。とはちょっと呼べないくらい内容が深いです！ [スライド] はじめての... 続きを読む

統計屋はどこまで給料をもらうべきか - 統計学＋ε: 米国留学・研究生活

2013/06/30 134 users 給料 統計学 統計屋 米国留学・研究生活 マージン

アカデミアでもビジネスでも統計解析のニーズは高くて、 データを分析して欲しいというような依頼は結構くる。 しかし、分析の対価としてどこまで給料をもらうべきなのか、 というのはなかなか難しい問題だ。 完全にビジネスとして外注して、博士レベルの統計屋に 分析をさせると、単価は１時間で１００ドル前後のようだ。 以前に、コンサルティング会社が時給７５ドルでそういった求人を 出していたから、マージンなどを考... 続きを読む

R統計解析入門： 統計解析　テクニカルデータプレゼンテーション　 梶山　喜一郎

2013/05/02 326 users 梶山 リテラシ グラフィックス コピペ 科目

Technical Data presentation in R コピペで学ぶ Rでテクニカルデータプレゼンテーション １．基礎統計解析編 グラフィックス・リテラシ－教育: 「図学 I ・図形情報 I ・統計学」科目　修了後のコースウェア 福岡大学工学部図学教室　　　梶山　喜一郎 ・体系だったスキルにするために順を追って学習する． ・確かなスキルにするために，教科書・解説書を理解し，Rスクリプトで... 続きを読む

《Gunosy》開発チームから学ぶ、WEB業界人のための“統計学入門”│CAREER HACK

2013/01/10 342 users Gunosy データマイニング CAREER HACK 直撃

今、WEB業界で最もホットなテーマの一つである“統計学”。だが、一般的にはなかなか馴染みのない分野でもある。そこで、統計解析・データマイニングに基づいた高精度なパーソナルニュースキュレーションサービス《Gunosy》の開発チームを直撃。「はじめての統計学」と題し、統計学の基礎を教えていただいた。 2013-01-10 ここ最近、WEB業界において“統計”がキーワードになっている。 だが、そもそも“... 続きを読む

統計を学びたい人へ贈る、統計解析に使えるデータセットまとめ - ほくそ笑む

2012/02/14 1488 users 統計 パラメータ データセットまとめ 試行錯誤 統計手法

はじめに統計解析の手法を学ぶのに、教科書を読むのは素晴らしい学習方法です。しかし、教科書で理論的なことを学んだだけでは、統計手法を使いこなせるようにはなりません。統計解析手法を身につけるには、実際のデータについて手法を適用し、パラメータを変えるなどの試行錯誤を行い、結果を考察するというような経験を積むことが大切です。それでは実際のデータをどうやって手に入れましょうか？実験や調査をして実際のデータを... 続きを読む

NTT研究所におけるYammerの取り組みと、社内Twitterの統計解析

2012/01/18 496 users Pythonista Yammer tokoroten 分野

NTT研究所におけるYammerの取り組みと、社内Twitterの統計解析 — Presentation Transcript NTT研究所におけるyammerの取り組み 社内Twitterの統計解析 NTT情報流通プラットフォーム研究所 中山心太 自己紹介• 中山ところてん • ＠tokoroten • Pythonista• 分野 • セキュリティ • 自然言語処理 • ビッグデータ • PF... 続きを読む

最悪の人格に宿った最高レベルの知性−ロナルド・エイルマー・フィッシャー - what_a_dudeの日記

2011/10/03 150 users フィッシャー what_a_dude イカン 武勇伝 人格

科学, むかしばなし　私の統計解析における哲学は極めてフィッシャーに近く、人類史上最高レベルの傑物だと思っておるのですが、いかんともし難いほどイヤな野郎であったことが、数々の武勇伝と共に伝えられているので、まあこれはまず間違いなく、人格的に問題があったといって問題ないでしょう。Ronald.A.Fisher(1890-1962)　彼を一言で評するならば「天上天下唯我独尊」という感じです。間違いなく... 続きを読む

Rを使えるようになるための10のこと - Issei’s Analysis ～おとうさんの解析日記～

2011/09/17 599 users Issei’s Analysis Java SAS 解析日記

Rは統計解析を行うことができる強力なツールです。計算上の信頼性はとても高く、初めから備わっている基本関数が間違っていることはほぼありません。近年では行政機関で使われているという事例もちらほら聞きます。・姫路市役所での事例 これまでSASは使ってきたけどRは全く使ったことがない！JAVAとかC++とかガリガリ書けるけどRはよく分からない！という方々がすんなりRの世界に入れるよう、資料の探し場所や導入... 続きを読む

「統計オタク」の分析はつまらない？ - 社会学者の研究メモ

2011/09/03 68 users 社会学者 分析 研究メモ サマリ 佐藤俊樹

社会調査実践としての統計学作者: 佐伯胖,松原望出版社/メーカー: 東京大学出版会発売日: 2000/01メディア: 単行本購入: 20人 クリック: 251回この商品を含むブログ (14件) を見る第5章「統計の実践的意味を考える」（佐藤俊樹）研究会に向けて、同じ社会学者が書いた統計分析についてのエッセイということで読んでみた。頭を整理する意味で、サマリを作ってみた。5.1　統計解析の「意味」S... 続きを読む

実践！ Rで学ぶ統計解析の基礎 − ＠IT

2010/08/05 437 users 実践 概説 初歩 基礎 while文

Rで実践する統計的検定の初歩 （2010/8/4） 　前回に引き続き、Rを使ってカイ二乗検定や二項検定をやってみよう！ 統計的検定の意味についても概説します JavaScriptで繰り返し処理をしてみよう！ （2010/8/3） 　プログラムに繰り返し同じことをさせるにはどうすればよいのでしょうか。今回はfor文とwhile文を使ってみます。 Rは統計解析のブッシュナイフだ （2010/7/21）... 続きを読む

第1回 Rは統計解析のブッシュナイフだ - 実践！ Rで学ぶ統計解析の基礎 - ＠IT

2010/07/21 603 users 密林 リテラシー 実践 基礎 バクフー株式会社

第1回 Rは統計解析のブッシュナイフだ 柏野雄太 バクフー株式会社 2010/7/21 今ほど統計解析が必要とされる時代はありません。オープンソースの統計処理言語・環境の「R」を使って実践的な統計解析のテクニックとリテラシーを習得しましょう！ 読者にとってRは、世に溢れるデータの密林を切り開くための“ブッシュナイフ”となることでしょう（編集部） 統計解析の必要性とリテラシー 21世紀になって、経営... 続きを読む

卒論修論のために、これから統計学を学ぶつもりの人に知って欲しい5箇条 - 女教師ブログ

2009/02/27 527 users 5箇条 統計学 フィールドワーク 女教師ブログ 大学院

大学１年から生物学部とか経済学部に在籍している人なんかは、「統計学」の体系的なトレーニング受けざるを得ないと思うので問題はないのですが、問題はそういうトレーニングをすっ飛ばしたまま、統計解析が必要になる人の場合。例えば、学部時代は英米文学専攻で統計に無縁だったけれど、大学院で英語教育系に転向した人。あるいは、教育方法論系の研究室にいてフィールドワークばっかりやっていたけれど、統計系の分析も必要にな... 続きを読む