ソフトウェアのスクリーンショット:
robots.txtファイルからデータを引き出して、他のアプリケーションや統計ツールにそれを供給するために使用することができます。
、アクセスおよびステータスデータの理由をターゲットURLを抽出します。
このリリースの新機能：ます。
は、HTTP（S）要求エラーを処理します。
このバージョン0.7.2の新機能です：
このバグのためのメタ情報package.json修正しました。
この要件：
この0.6以上のNode.js
コメントが見つかりません