タグ Out-Of-Core
人気順 10 users 50 users 100 users 500 users 1000 usersPython Dask で Out-Of-Core / 並列 LU 分解 - StatsFragments
2016 - 01 - 23 Python Dask で Out-Of-Core / 並列 LU 分解 Dask Python はじめに 正方行列 を となる下三角行列 と 上三角行列 に分解することを LU 分解という。LU 分解ができると 連立方程式 の解や 逆行列 が 前進 /後退代入でかんたんに求められてうれしい。 Dask を使って LU 分解を Out-Of-Core / 並列でやりた... 続きを読む
Python Dask.Array で 並列 / Out-Of-Core 処理 - StatsFragments
2015 - 12 - 13 Python Dask.Array で 並列 / Out-Of-Core 処理 Dask 前処理 この記事は Python Advent Calendar 2015 13 日目の記事です。 Python で手軽に並列 / Out-Of-Core 処理を行うためのパッケージである Dask について書きたい。 Dask を使うと以下のようなメリットが得られる。 環境構築... 続きを読む
Python Dask で 並列 DataFrame 処理 - StatsFragments
2015-09-24 Python Dask で 並列 DataFrame 処理 Python pandas Dask はじめに 先日のエントリで少し記載した Dask について、その使い方を書く。Dask を使うと、NumPy や pandas の API を利用して並列計算/分散処理を行うことができる。また、Dask は Out-Of-Core (データ量が多くメモリに乗らない場合) の処理も... 続きを読む