無料プロキシリスト: 隠れたコストを正直に測定
無料プロキシリストは180カ国にわたる数万のIPを宣伝しています。その見出しの裏にある不快な数字: 15秒のライブネスチェック、毎時間変わるプール、そして実際の成功率はほぼゼロ。
無料プロキシリストはインターネット上で最も魅力的なものの一つです: 数万のIPアドレス、180以上の国々、毎分更新、TXT、JSON、CSVとしてダウンロード可能、価格はゼロドル。もしそれが機能するなら、誰もプロキシにお金を払わないでしょう。それは機能しません — 重要なことに対しては — そしてその理由は意見ではなく測定可能です。この投稿では無料プロキシリストの正直な計算を行います: 「動作する」とは実際に何を意味するのか、なぜプールは触れる前に焼き尽くされるのか、実際のセキュリティリスクは何か、そして本当に安価な有料プロキシがどのように計算を変えるのか。
「動作する」とは15秒のpingに応答したことを意味します
見出しの主張から始めましょう。人気のあるリストはそのIPを「検証済み」および「ライブ」として宣伝し、毎分再確認されます。細かい字を読むと、検証は15秒のタイムアウトを伴う接続試行です。それが全ての基準です: プロキシが15秒以内にTCP接続を受け入れたということです。それはIPがターゲットをロードできるかどうか、レート制限されているかどうか、コンテンツを挿入するかどうか、あるいはすでにすべてのアンチボットベンダーによってブロックリストに登録されているかどうかについては何も言っていません。プロキシはリスト上で「ライブ」であり、最初の実際のリクエストで403を返すことができます — その二つは無関係です。ある有名なGitHubミラーは、約115カ国からの約3,000の動作するプロキシのスナップショットを公開しており、5分ごとに更新されます。5分ごとに更新されるということは、1時間後にはプールが完全に異なるということです。今朝検証したIPは昼食までに死んでいます。
プールはあなたが到着する前に焼き尽くされています
ここにどんなリストの更新でも解決できない構造的な問題があります: 無料プロキシは公共であり、つまり地球上のすべてのスクレーパー、スパマー、ボット運営者があなたがダウンロードしたのと同じIPを叩いているということです。アドレスが公共リストに現れる頃には、すでに何千人もの見知らぬ人々がGoogle、Amazon、Cloudflare、そしてあなたが気にするログインページに対してそれを使用しています。それは新鮮なIPではありません — それは共有され、乱用されたものであり、ほぼ確実にあなたの正確なターゲットで既にレート制限されているかブロックリストに登録されています。あなたはクリーンなアイデンティティを得ているのではなく、焼き尽くされたアイデンティティを引き継いでいるのです。それはプロキシの目的とは正反対であり、保護されたサイトに対する成功率がほぼゼロに近い理由です。私たちのウェブサイトがプロキシを検出する方法の内訳では、共有され、高乱用のIPが即座にフラグされる理由を説明しています。
import requests
# a typical free-list test: most fail, the survivors are burned
free = ["http://14.239.189.250:8080", "http://103.127.252.57:3128"]
ok = 0
for p in free:
try:
r = requests.get("https://httpbin.org/ip",
proxies={"http": p, "https": p}, timeout=8)
if r.status_code == 200:
ok += 1
except Exception:
pass
print(f"{ok}/{len(free)} reachable # and 'reachable' != 'passes your target'")
心配すべき部分: MITMと漏洩
コストを除いても、無料プロキシは本物のセキュリティハザードであり、運営者自身がそれを言っています。公共リストの提供者自身が、プロキシは未知のボランティアによって運営されており「感染している可能性がある」と警告しています。プロキシはあなたのすべてのトラフィックを見ます。悪意のあるパーティによって運営されるHTTPプロキシは、暗号化されていないものを読み取り、変更し、ページにスクリプトや広告を挿入し、送信した資格情報を収集し、訪問したすべてのサイトを記録することができます。HTTPS経由でも、敵対的な出口は証明書のトリックを試みたり、単に接続先のメタデータを記録したりすることができます。スクレーパーを通すことはおろか、ログインフローをランダムな見知らぬ人のサーバーを通すことは、あなたのセッションにタップを渡すことになります。作業がアカウント、個人データ、または公開しないものに触れる場合、無料プロキシはプライバシーの観点から失格です。そしてこれらのリストに含まれる透明な階層のプロキシは、転送ヘッダーであなたの実際のIPを漏洩させるため、匿名性さえ提供しません。
隠れた請求書: あなたの時間
無料プロキシは無料ではありません; コストはカードからカレンダーに移動するだけです。プールが絶えず変動するため、フェッチと検証のループを構築し、毎回の実行前に数百のIPを再テストし、死んだ出口が失敗するたびに各リクエストを数回再試行し、実際には途中で死んだプロキシによる幽霊のような問題をデバッグします。帯域幅は最悪の方法で無制限です — 運営者は無料プロキシがどれだけのデータを運べるかを教えてくれないので、大きなダウンロードの途中で止まるかもしれません。エンジニアリング時間と失敗した実行を合計すると、「無料」の選択肢はしばしば有料のものよりも高くつきます。これは私たちの安価なプロキシが長期的にコストがかかる理由に関する投稿での正確な議論です — そして無料は安価の極端なケースです。
正直な代替案: 実際に安価な有料プロキシ
「無料リストが悪い」の反論は「最も高価なプレミアムプールを購入する」ではありません。それは、少し支払ってあなたのものであるクリーンで安定したIPを手に入れることです。安価なプロキシプランは、インターネット全体と共有されていない出口を提供し、15秒のpingではなく実際の使用のために検証され、信頼できる国のターゲティングを備え、見知らぬ人がログを取らない暗号化されたトラフィックを運びます。予算に応じたスクレイピングと自動化のために、住宅基本プロキシはエントリープライスで実デバイスのIPを提供します — 無料リストが偽装しているのと同じインフラストラクチャで、乱用の歴史や漏洩リスクはありません。無料でも有料でも、どのプールを信頼する前に、無料のIP品質チェッカーを通してサンプルを実行し、実際に作業している詐欺スコアを確認してください。まだ階層を検討している場合、安価なプロキシとプレミアムプロキシの比較は、それぞれがどこで意味を持つかを説明しています。
無料プロキシが問題ない場合
率直さは両方の方法で切ります。無料プロキシが合理的である唯一の状況は、使い捨てで非機密の一回限りのリクエストを、アンチボット保護がないサイトに対して行う場合です。失敗しても気にせず、何もプライベートなものを送信しない場合です。たとえば、公共のページがジオブロックされているかどうかを確認することです。ログイン、資格情報、個人データ、保護されたターゲット、または実際に完了しなければならないジョブがある瞬間に、無料リストはショートカットではなく責任になります。リスクに応じたツールを選び、安全で倫理的なプロキシプロバイダーを選ぶ方法のチェックリストでプロバイダーを選んでください。
よくある質問
無料プロキシリストは安全に使えますか？
いいえ、機密性のあるものには使用しないでください。無料プロキシは未知のボランティアによって運営されており、リスト提供者自身がプロキシが感染している可能性があると警告しています。悪意のある出口は、暗号化されていないトラフィックを読み取り、変更し、コンテンツを挿入し、資格情報を収集することができます。ログイン、個人データ、またはアカウント活動を無料プロキシ経由でルートしないでください。
なぜ無料プロキシは頻繁に失敗するのですか？
それらは公共であり、無数のユーザーによって共有されているため、人気のあるターゲットで既にレート制限されているか、ブロックリストに登録されているからです。リスト上で「ライブ」であるということは、IPが15秒の接続テストに応答したということだけで、ターゲットをロードするかどうかは意味しません。プールも数分ごとに変動するため、今日の動作するIPは1時間以内に死んでいます。
実際に動作する無料プロキシはどれくらいありますか？
数万がリストされている中で、スナップショットは基本的な接続テストに対して数千の「動作する」ものを示すかもしれません — しかし実際の保護されたターゲットに対しては、効果的な成功率は通常数パーセント以下です。なぜなら、それらの生存者は共有され、焼き尽くされているからです。あなた自身の検証後の使用可能な収量は、見出しの数よりはるかに小さいです。
無料よりも安価な有料プロキシは価値がありますか？
ほとんどの場合そうです。数セントで、共有されていないあなたのIPを取得し、実際の使用のために検証され、チャーンするのではなく安定しており、地理的にターゲット可能で、見知らぬ人があなたのトラフィックをログに取らないように暗号化されています。無料リストがかかるエンジニアリング時間と失敗した実行を考慮すると、安価な有料プロキシは通常、全体的により安価なオプションです。
無料プロキシリストは見つけたUSBスティックが無料であるように無料です: 代償は失敗したジョブ、無駄な時間、そして反対側で何が動いているかのリスクで後で支払われます。正直な計算を行うと、安価でクリーンなプールがコストと安全性の両方で勝ちます。