K-meansのクラスタ数を決めるのにエルボー法を使うのはやめよう、という論文 - 渋谷駅前で働くデータサイエンティストのブログ

2023/01/27 70 users k-means Twitter 論文 データサイエンティスト

クラスタリングに用いられるK-meansのクラスタ数決定方法については長く議論されてきた歴史があり、このブログでも以前ちょろっと取り上げたことがあります。 で、Twitterを眺めていたらタイムラインに面白い論文が流れてきました。それがこちらです。 タイトルを読んで字の如く「K-meansのクラスタ数を決めるのにエルボ... 続きを読む

教師あり学習の精度を超えた！？相互情報量の最大化による教師なし学習手法IICの登場！ | AI-SCHOLAR

2020/02/01 68 users AI-SCHOLAR ニューラルネット 精度 クラスタ 要点

3つの要点 相互情報量を最大化する枠組みでニューラルネットを学習する教師なし学習手法IICの提案 予測値をそのまま出力するニューラルネットを学習可能であるため、クラスタリングが不要 従来の教師なし学習手法の「クラスタが一つにまとまってしまう問題」および「ノイズに弱いという問題」を解決 Invariant Informati... 続きを読む

クラスタリングで時系列予測はできる？ 〜Twitterの株価を予測してみた〜 - BASE開発チームブログ

2018/12/20 54 users Twitter 時系列予測 株価 BASE開発チームブログ

これは「BASE Advent Calendar 2018」の20日目の記事です。 devblog.thebase.in こんにちは。Data Strategy Group の岡です。趣味は珍しいお酒を飲むこと、将来の夢はウイスキーの蒸留所を持つことです。 私は機械学習エンジニアとしてまだ２年目なのですが、「この予測手法、本やweb上でほとんど見かけないな。」とずっ... 続きを読む

B'zの歌詞をPythonと機械学習で分析してみた 〜Word 2 Vec編〜 - データサイエンティスト見習い達の日常

2018/08/12 65 users Python B'z 歌詞 機械学習 LdA

1. 本Part概要 こんにちは。pira_ninoです。 早速のお知らせなのですが、本編から超絶優秀な友人のtaijest君も編集に加わってもらっています。これに伴いブログのタイトルも若干変更しました。 さて本題に戻ります。 前PartではB'zの歌詞を「LDA」を用いた曲のクラスタリングを行いました。 皆様のおかげで週間のランキ... 続きを読む

Pythonの機械学習ライブラリtslearnを使った時系列データのクラスタリング - Technology Topics by Brains

2018/06/19 76 users scikit-learn github.com 柏木 ベース

こんにちは、ブレインズテクノロジーの柏木です。 今回はPythonで扱える機械学習ライブラリのtslearnを使って、時系列データをクラスタリングしていきたいと思います。 github.com tslearnとは 時系列分析のための機械学習ツールを提供するPythonパッケージで、scikit-learnをベースとして作られているみたいです。 主な... 続きを読む

Pythonで単語分散表現のクラスタリング - 自然言語処理の深遠

2017/11/01 74 users Python 演算 ベクトル 言語処理 単語

2017 - 11 - 01 Pythonで単語分散表現のクラスタリング Python Wikipedia gensim 機械学習 自然言語処理 最近の 自然言語処理 では、単語の分散表現は当たり前のように使われています。 単語分散表現では、各単語が高次元ベクトル空間に配置され、 加減乗除 等の演算を行えるようになります。 これらのベクトルは、意味の近い単語に対しては同じようなベクトルになることが... 続きを読む

Docker 1.9がリリース。マルチホストネットワーキング、クラスタリングのDocker Swarmなどが本番環境で利用可能に － Publickey

2015/11/05 59 users Publickey Docker Docker Swarm

Docker 1.9がリリース。マルチホストネットワーキング、クラスタリングのDocker Swarmなどが本番環境で利用可能に Docker 1.9では、マルチホストネットワーク機能が安定版となり、永続的ストレージ機能が強化され、クラスタリングツールのDocker Swarmが正式版となりました。 マルチホストネットワーク機能 マルチホストネットワーク機能は、Docker Engineの機能とし... 続きを読む

Rをゼロから始めてクラスタリングまでやってみる - Catcher in the tech

2014/09/18 1584 users 出番 エンジニア インストール web 資料

Rのインストールからグループ集計、クラスタリングまでをRに触れたことがない人が体験できるようにまとめてみました。こんにちは、エンジニアのnishimuです。 最近Rの勉強を始めました。Rが使えるようになると色々なデータが統計的に分析できるようになるので、そろそろ社内でも出番があるかなと思っています。 Rの資料については既に詳しいものがWebや書籍上に数多く存在しています。今回の記事は、Rの詳しい解... 続きを読む

CoreOSによるDockerコンテナのクラスタリング

2014/09/06 195 users Description usr bin unit CoreOS

CoreOSによるDockerコンテナのクラスタリング Presentation Transcript [Unit] Description=busybox Requires=docker.service After=docker.service [Service] TimeoutStartSec=0 ExecStartPre=-/usr/bin/docker kill busybox ExecS... 続きを読む

Pythonでx-means法を実装した - WEB SALAD

2014/07/22 57 users Python WEB SALAD 修士論文 示唆 実装

2014-07-19 Pythonでx-means法を実装した 機械学習 Python はじめに 最近、このままだと修士論文がすごくシンプルな内容になりそうなことに気づいたので、ページ数を稼ぐためによりよい示唆を得るために、何か分析を足す必要が出てきました。 色々考えた結果、x-means法によるクラスタリングを行うことにしたのですが、同手法のPythonによる実装が見つからなかったので、勉強も兼... 続きを読む

K-means 法を D3.js でビジュアライズしてみた - てっく煮ブログ

2013/11/07 62 users k-means 煮ブログ d3.js 動作原理 ステップ

クラスタリングの定番アルゴリズム K-means 法（K平均法）の動作原理を理解するために、D3.js を使って可視化してみました。 ステップ 最初から N (ノード数): K (クラスター数): 新規作成 図をクリックするか [ステップ] ボタンを押すと、1ステップずつ処理を行います [最初から] ボタンを押すと、最初の状態に戻ります [新規作成] ボタンを押すと、N (ノード数) と K (ク... 続きを読む

JavaScriptで画像のクラスタリングによるドット絵風加工 « Rest Term

2013/09/08 54 users Rest Term 一例 RGB値 特徴ベクトル 各画素

pixel clustering using k-means++ 前回のJavaScriptでPoisson Image Editingによる滑らかな画像合成に引き続き、HTML5 Canvasを使ったJavaScriptによる画像処理の一例を紹介します。 今回は画像の画素値に対するクラスタリング(分類)を画像加工用途に応用します。クラスタリングには各画素のRGB値を特徴ベクトル(次元数3)として... 続きを読む

Vagrant を使って fluentd のクラスタリングを試す ｜ Developers.IO

2013/06/13 55 users fluentd Vagrant Developers.IO

Vagrant を使って、fluentd のクラスタリング（負荷分散とHA構成）を試してみました。 イメージはこんな感じ。 ログ受信側（log aggregators）のセットアップ ※Vagrant をインストールしてない場合は、別途インストールしてください。 2台のサーバを順番にセットアップします。 先ずは、1台目。 $ mkdir -p vagrant/server1 && cd vagra... 続きを読む

Webデータ分析＆データサイエンスで役立つ統計学・機械学習系の分析手法10選 - 道玄坂で働くデータサイエンティストのブログ

2013/06/10 1092 users 道玄坂 データサイエンティスト SVM 統計学 機械学習系

主に自分向けのまとめという意味合いが強いんですが（笑）、僕が実際に2013年6月現在webデータ分析＆データサイエンスの実務でツール・ライブラリ・パッケージを利用しているものに限って、統計学・機械学習系の分析手法を10個挙げて紹介してみようと思います。 回帰分析 独立性の検定 主成分分析・因子分析 クラスタリング 決定木 / 回帰木 サポートベクターマシン(SVM) ロジスティック回帰 ランダムフ... 続きを読む

ユーザーの行動を分類してウェブページを最適化するサービスを提供--スパイスボックス

2006/08/09 51 users ウェブページ スパイスボックス オンラインマーケティング

ネットビジネスコンサルティングのスパイスボックスは8月9日、オンラインマーケティングを手がける米[x+1]（エックスプラスワン、旧社名Poindexter Systems）と提携し、同社が提供するウェブページ最適化サービス「Site+1」（サイトプラスワン）を国内で販売すると発表した。 Site+1は、行動ターゲティング技術を活用し、ユーザーの行動に基づいたクラスタリング（分類）を行い、企業サイト... 続きを読む