Scrapy

Scrapyは、高レベルのWeb情報検索からの監視やテストのウェブサイトに、目的のすべての種類のWebページをクロールし、解析するためにクモを書くためのフレームワークをクロールし、掻きでます。

の特長の

シンプル：
• Scrapyがあなたの方法で得ることなく、必要な機能を提供することにより、念頭に置いてシンプルさで設計されました。

生産
• だけで、Webページからデータを抽出するためのルールを記述し、Scrapyはあなた
のためにWebサイト全体をクロールしましょう
ファスト：
• Scrapyが完全に一つのサーバで毎日500以上の小売業者のサイト、すべてをこすりするために、生産のクローラで使用されます。

拡張：
• Scrapyは拡張性を考慮して設計されたので、それは、フレームワークコアを触れることなく、新しいコードを接続するいくつかのメカニズムを提供したします。

ポータブル
• Scrapyは、Linux、Windows版、MacおよびBSD上で実行されます。

オープンソースの、100％のPython：
それは非常に簡単にScrapyが完全にPythonで書かれている
• は、ハックします。

十分にテストされた
• はScrapyは非常に良いコードカバレッジを持つ大規模なテストスイートを持っています。

の要件の

• のPythonます。