urlclean

urlcleanは、以下の機能を提供します。
- HTTPリダイレクトに従うこと、
- HTMLのMETAリダイレクト従うには、
- ウニやFacebookトラッカーURLパラメータを削除するには
- さまざまなURLをunshortenして解決するために、これらすべてを組み合わせた
コマンドラインからそれを試してみてください：
＆NBSP; Pythonの-m urlclean <いくつかのURL>
内容：
のインデックスとテーブルの
- インデックス
- モジュールのインデックス
- 検索ページ
コー​​ドのためのドキュメントの
リダイレクトされたURLを解決し、追跡するURL paramsをを削除し、モジュールをurlcleaner
urlclean.weedparams（URL）
＆NBSP;のURLからウニトラッカーやFacebookサーベイランスのparamsを削除します。
＆NBSP;引：
＆NBSP; URL（文字列）：醜いのparamsのスクラブへのURL
＆NBSP;戻り値：
＆NBSP;（文字列）。リターンクリーンURL
urlclean.httpresolve（URL、= 'localhost'のUA =なし、proxyhost、proxyPortの= 8118）
＆NBSP; httpリクエストの1リダイレクトを解決する。
＆NBSP;引：
＆NBSP; URL（文字列）：URLは1リダイレクトに従うこと
＆NBSP; UA（FN）：ユーザーエージェント文字列を返す関数（オプション）
＆NBSP; proxyhost（文字列）：HTTPプロキシサーバ（オプション）
＆NBSP;プロキシポート（INT）：HTTPプロキシサーバのポート（オプション）
＆NBSP;戻り値：（文字列、httplib.response）。リターンは、URLを解決し、
＆NBSP; HTTPクエリからの応答
urlclean.unmeta（URL、RES）
＆NBSPは、すべてのメタは、コンテンツタイプとしてtext / htmlのを持っていhttplib.responseオブジェクトをリダイレクトし検索します。
＆NBSP;引：
＆NBSP; URL（文字列）：URLは1リダイレクトに従うこと
＆NBSP; RES（httplib.response）：http.responseオブジェクト
＆NBSP;戻り値：（文字列）。リターン解決URL
urlclean.unshorten（URL、キャッシュ=なし、UA =なし、>> ** <> **