1日に3エントリーも書いて、ただのブロガーみたいになってますが、ipyparallelが素敵すぎるので、メモ。

ipyparallelのページはこちら。その名の通り、並列処理を簡単にやってくれるライブラリです。
ドキュメントにある通り、インストールは至って簡単。

pip install ipyparallel

その後、.jupyter/jupyter_notebook_config.pyに以下を追加。

c.NotebookApp.server_extensions.append('ipyparallel.nbextension')

そうすると、notobookを起動した時に、IPython Clustersのところが使えるようになっています。

import ipyparallel as ipp
# 設定した個数のクライアントが返ってくる
rc = ipp.Client()
#クライアントのIDを出力
rc.ids
lv = rc.load_balanced_view()
rs = lv.map_async(なんかの関数, 処理するデータのリスト)
# これが素敵。1秒ごとに進捗を表示してくれる
rs.wait_interactive()
# 修了したら、結果がこのリストに格納されます。
rs.result

すこし、使ってまた書きます。