AI・Pythonipyparallelで複数ノードで並列計算機を作る
ipyparallelの概要 pythonコードを複数のサーバーで並列化して走らせることが出来るipython拡張機能。 詳細なアーキテクチャは少し複雑だが、全体を統括するコントローラーが走るノードが1台、engineが走る計...
AI・Python
AI・PythonAI・Python私が選ぶディープラーニング用サーバーの構成
はじめに 想定するのはせいぜいGPU~2枚で完結するようなタワーマシンの構成。NVLinkとか知らない。 仕事で機械学習用マシンの選定とかやってるけど、もし特に縛りなくぼくのかんがえたさいきょうのGPUマシンを買えるならどんな...
AI・Python季刊超々ハイエンドサーバーの世界 2020年春号
1-3月が冬、4-6月は春だ HDDの大容量化進む WDが20TB HDDを出荷 WDがSMR方式で20TBのHDD、およびCMR方式で18TBのHDDをサンプル出荷 昭和電工が熱アシスト記録メディアの開発に成功 昭和電工が熱アシス...
AI・PythonGloVeの分散表現モデルをGensimで扱う
研究でDistributed representationの方のGloVeモデルを作成して、Word Mover's Distanceを計算したかった。 結構手間取ったので詳細を書く。 GloVeで作成されたモデルのファイル形式 pipで...