doloop

doloop 0.2.1

doloopが更新一意のIDで物事を維持するためのシンプルだが、よく考え抜かれたシステムです。これは、優先順位付けと同時実行をサポートしています。doloopの唯一の依存関係は、MySQLです。それは別のサーバーをインストールするか、または管理する必要はありません。doloopは、あなたが一度だけ実行するタスクをキューイングするための理想的ではありません。そのために、あなたはGearmanまたは類似のものを好むかもしれません。チュートリアルとドキュメンテーションのためhttp://packages.pyth...

続きを読む
mrjob

mrjob 0.4

mrjobでは、Hadoopのストリーミングジョブを作成し、実行することができますPythonモジュールです。mrjobは完全にあなたが時間単位でのHadoopクラスタ上で時間を買うことができますAmazonのElastic MapReduceは(EMR)サービスを、サポートしています。それはまた、独自のHadoopクラスタで動作します。のインストール:のPythonはsetup.py installをののAmazonでEMRを設定する  * Amazon...