AI・Python

AI・Python

CPU・GPUの機械学習向けデータ型対応状況

Intel CPU及びNVIDIAのGPUの半精度、INT8などの対応状況まとめてみた。AMDはZEN4除いて基本的にすべて非対応。TCはTensorCoreFP16BFloat16TF32INT8FP8Kepler✕✕✕✕✕Maxwell...
AI・Python

ipyparallelで複数ノードで並列計算機を作る

ipyparallelの概要pythonコードを複数のサーバーで並列化して走らせることが出来るipython拡張機能。詳細なアーキテクチャは少し複雑だが、全体を統括するコントローラーが走るノードが1台、engineが走る計算ノード的なノード...
AI・Python

私が選ぶディープラーニング用サーバーの構成

はじめに想定するのはせいぜいGPU~2枚で完結するようなタワーマシンの構成。NVLinkとか知らない。仕事で機械学習用マシンの選定とかやってるけど、もし特に縛りなくぼくのかんがえたさいきょうのGPUマシンを買えるならどんな構成にしたいか考え...
AI・Python

季刊超々ハイエンドサーバーの世界 2020年春号

1-3月が冬、4-6月は春だHDDの大容量化進むWDが20TB HDDを出荷WDがSMR方式で20TBのHDD、およびCMR方式で18TBのHDDをサンプル出荷昭和電工が熱アシスト記録メディアの開発に成功昭和電工が熱アシスト記録に対応したH...
AI・Python

GloVeの分散表現モデルをGensimで扱う

研究でDistributed representationの方のGloVeモデルを作成して、Word Mover's Distanceを計算したかった。結構手間取ったので詳細を書く。GloVeで作成されたモデルのファイル形式pipでインスト...