『ことばのデータサイエンス』という本を刊行します - langstat blog

2019/08/14 60 users データサイエンス 単行本 目次 作者 ウェブサイト

9月5日、『ことばのデータサイエンス』という書籍を刊行いたします。すでに目次や「はじめに」が出版社のウェブサイトで公開されていますが、ここでは、もう少し詳しくご紹介します。 ことばのデータサイエンス 作者: 小林雄一郎出版社/メーカー: 朝倉書店発売日: 2019/09/05メディア: 単行本この商品を含むブログを見る... 続きを読む

頻度差の検定の効果量としてオッズ比を用いる - langstat blog

2015/01/01 16 users 検定 有意差 カイ二乗検定 効果量 2015-01-01

2015-01-01 頻度差の検定の効果量としてオッズ比を用いる corpus r stat コーパス分析で頻度差を検定する場合、カイ二乗検定や対数尤度比検定がよく使われます。しかし、このような検定には、サンプル・サイズが大きくなれば、実質的な差がなくとも、「有意差あり」という誤った結果が得られる危険性があります。そのようなときには、検定の結果だけでなく、何らかの効果量を確認する必要があります。効... 続きを読む

コーパス間で頻度差の大きい単語を特定する - langstat blog

2014/05/14 27 users コーパス 仮説 単語 出現頻度 アプローチ

2014-05-14 コーパス間で頻度差の大きい単語を特定する r corpus 複数のコーパスにおける単語の出現頻度を比較する場合、比較対象となる語は、分析者によってあらかじめ決められています。従って、そのような比較は、分析者の仮説を統計的に検証するアプローチと言えるでしょう。しかし、実際の分析では、どの単語に注目すればよいかが事前に分かっているとは限りません。そのような場合は、コーパスに出現す... 続きを読む