Darmowe listy proxy: ukryte koszty, uczciwie zmierzone
Darmowa lista proxy reklamuje dziesiątki tysięcy IP w 180 krajach. Niewygodne liczby za tym nagłówkiem: 15-sekundowa kontrola żywotności, pula zmieniająca się co godzinę i rzeczywista skuteczność bliska zeru.
Darmowa lista proxy to jedna z najbardziej kuszących rzeczy w internecie: dziesiątki tysięcy adresów IP, ponad 180 krajów, odświeżane co minutę, dostępne do pobrania jako TXT, JSON lub CSV, za dokładnie zero dolarów. Gdyby to działało, nikt nigdy nie płaciłby za proxy. To nie działa — nie dla niczego, co ma znaczenie — a powody są mierzalne, a nie subiektywne. Ten post przedstawia uczciwą arytmetykę darmowych list proxy: co naprawdę oznacza "działanie", dlaczego pula jest wypalona zanim ją dotkniesz, jakie jest rzeczywiste ryzyko bezpieczeństwa i gdzie naprawdę tanie płatne proxy zmieniają matematykę.
"Działanie" oznacza, że odpowiedziało na 15-sekundowy ping
Zacznijmy od głównego twierdzenia. Popularne listy reklamują swoje IP jako "zweryfikowane" i "żywe", sprawdzane co minutę. Przeczytaj drobny druk, a weryfikacja to próba połączenia z 15-sekundowym limitem czasu. To jest cały próg: proxy zaakceptowało połączenie TCP w ciągu piętnastu sekund. Nie mówi to nic o tym, czy IP może załadować twój cel, czy jest ograniczone, czy wstrzykuje treści, czy jest już na czarnej liście wszystkich dostawców anty-botów. Proxy może być "żywe" na liście i zwrócić 403 przy pierwszym rzeczywistym żądaniu — te dwie rzeczy są niezwiązane. Znane lustro na GitHub otwarcie raportuje migawkę około 3000 działających proxy z około 115 krajów, odświeżanych co pięć minut. Odświeżane co pięć minut oznacza, że pula jest całkowicie inna godzinę później; IP, które zweryfikowałeś rano, są martwe w porze lunchu.
Pula jest wypalona zanim przybędziesz
Oto strukturalny problem, którego żadna ilość odświeżania listy nie naprawi: darmowe proxy jest publiczne, co oznacza, że każdy scraper, spammer i operator botów na ziemi uderza w to samo IP, które właśnie pobrałeś. Zanim adres pojawi się na publicznej liście, tysiące nieznajomych już go użyło przeciwko Google, Amazon, Cloudflare i stronom logowania, na których ci zależy. To nie jest świeże IP — to współdzielone, nadużywane, prawie na pewno już ograniczone lub na czarnej liście na twoim dokładnym celu. Nie dostajesz czystej tożsamości; dziedziczysz wypaloną. To jest przeciwieństwo tego, do czego służy proxy, i dlatego wskaźniki sukcesu przeciwko jakiejkolwiek chronionej stronie są bliskie zeru. Nasza analiza jak strony wykrywają proxy wyjaśnia, dlaczego współdzielone, wysoko nadużywane IP jest natychmiast oznaczane.
import requests
# a typical free-list test: most fail, the survivors are burned
free = ["http://14.239.189.250:8080", "http://103.127.252.57:3128"]
ok = 0
for p in free:
try:
r = requests.get("https://httpbin.org/ip",
proxies={"http": p, "https": p}, timeout=8)
if r.status_code == 200:
ok += 1
except Exception:
pass
print(f"{ok}/{len(free)} reachable # and 'reachable' != 'passes your target'")
Część, która powinna cię martwić: MITM i wycieki
Pomijając koszty, darmowe proxy stanowią rzeczywiste zagrożenie dla bezpieczeństwa, a operatorzy o tym mówią. Sami dostawcy publicznych list ostrzegają, że proxy są obsługiwane przez nieznanych wolontariuszy i "mogą być zainfekowane". Proxy widzi cały twój ruch. HTTP proxy obsługiwane przez złośliwą stronę może odczytywać i modyfikować wszystko, co nie jest zaszyfrowane, wstrzykiwać skrypty lub reklamy na strony, zbierać wszelkie przesyłane dane uwierzytelniające i rejestrować każdą odwiedzaną stronę. Nawet przez HTTPS, wrogie wyjście może próbować sztuczek z certyfikatami lub po prostu rejestrować metadane o tym, gdzie się łączysz. Przekazywanie scraperowi — nie mówiąc już o przepływie logowania — przez serwer przypadkowego nieznajomego to oddawanie im kranu do twojej sesji. Jeśli praca dotyczy kont, danych osobowych lub czegokolwiek, czego nie opublikowałbyś publicznie, darmowe proxy jest dyskwalifikujące ze względu na prywatność. A przezroczyste proxy, które te listy zawierają, ujawniają twój prawdziwy IP w nagłówkach przekazywania, więc nawet nie zapewniają anonimowości.
Ukryty rachunek: twój czas
Darmowe proxy nie są darmowe; koszt po prostu przenosi się z twojej karty na twój kalendarz. Ponieważ pula ciągle się zmienia, budujesz i utrzymujesz pętlę pobierania i weryfikacji, ponownie testujesz setki IP przed każdym uruchomieniem, ponawiasz każde żądanie kilka razy, gdy martwe wyjścia zawodzą, i debugujesz problemy widmowe, które są naprawdę tylko proxy, które umarło w trakcie pracy. Przepustowość jest niemierzona w najgorszy sposób — operatorzy nie mogą ci powiedzieć, ile darmowe proxy może przenieść, więc może się zatrzymać w połowie dużego pobierania. Dodaj godziny inżynierskie i nieudane uruchomienia, a "darmowa" opcja jest często droższa niż płatna, co jest dokładnym argumentem w naszym poście o dlaczego tanie proxy kosztują więcej w dłuższej perspektywie — a darmowe to tylko ekstremalny przypadek taniego.
Uczciwa alternatywa: naprawdę tanie płatne proxy
Kontrargumentem do "darmowe listy są złe" nie jest "kup najdroższą premium pulę." To zapłacić trochę za IP, które są twoje, czyste i stabilne. Tani plan proxy daje ci wyjścia, które nie są współdzielone z całym internetem, są zweryfikowane do rzeczywistego użytku, a nie 15-sekundowego pinga, mają prawdziwe celowanie krajowe, na które możesz polegać, i przenoszą zaszyfrowany ruch, którego nikt nie rejestruje. Dla skrobania i automatyzacji na budżet, podstawowe proxy rezydencjalne dostarczają IP urządzeń rzeczywistych w cenie wejściowej — ta sama infrastruktura, którą darmowe listy udają, bez historii nadużyć ani ryzyka wycieku. Zanim zaufasz jakiejkolwiek puli, darmowej czy płatnej, przetestuj próbkę przez nasz darmowy sprawdzacz jakości IP, aby zobaczyć wynik oszustwa, z którym faktycznie pracujesz. Jeśli nadal ważysz poziomy, tanie vs premium proxy przedstawia, gdzie każde ma sens.
Zamień darmową listę na tanie, czyste proxy
Kiedy darmowe proxy jest w porządku
Szczerość działa w obie strony. Jest dokładnie jedna sytuacja, w której darmowe proxy jest rozsądne: jednorazowe, nieczułe żądanie do strony bez ochrony anty-botowej, gdzie nie obchodzi cię, czy się nie powiedzie i nie wysyłasz niczego prywatnego. Na przykład sprawdzanie, czy publiczna strona jest zablokowana geograficznie. W momencie, gdy pojawia się logowanie, dane uwierzytelniające, dane osobowe, chroniony cel lub zadanie, które musi się faktycznie zakończyć, darmowa lista przestaje być skrótem i staje się obciążeniem. Wybierz narzędzie odpowiednie do stawki i wybierz dostawcę z listą kontrolną w jak wybrać bezpiecznego, etycznego dostawcę proxy.
Często zadawane pytania
Czy darmowe listy proxy są bezpieczne w użyciu?
Nie, nie dla niczego wrażliwego. Darmowe proxy są obsługiwane przez nieznanych wolontariuszy, a sami dostawcy list ostrzegają, że proxy mogą być zainfekowane. Złośliwe wyjście może odczytywać i modyfikować twój niezaszyfrowany ruch, wstrzykiwać treści i zbierać dane uwierzytelniające. Nigdy nie przekierowuj logowań, danych osobowych ani aktywności konta przez darmowe proxy.
Dlaczego darmowe proxy zawodzą tak często?
Ponieważ są publiczne i współdzielone przez niezliczonych użytkowników, więc są już ograniczone lub na czarnej liście na popularnych celach, zanim je pobierzesz. "Żywe" na liście oznacza tylko, że IP odpowiedziało na 15-sekundowy test połączenia, a nie że załaduje twój cel. Pula również zmienia się co kilka minut, więc dzisiejsze działające IP są martwe w ciągu godziny.
Ile darmowych proxy faktycznie działa?
Z dziesiątek tysięcy wymienionych, migawka może pokazać kilka tysięcy "działających" w podstawowym teście połączenia — ale w przypadku rzeczywistego, chronionego celu efektywny wskaźnik sukcesu to zazwyczaj kilka procent lub mniej, ponieważ te ocalałe są współdzielone i wypalone. Użyteczna wydajność po twojej własnej weryfikacji jest znacznie mniejsza niż liczba w nagłówku.
Czy tanie płatne proxy są warte więcej niż darmowe?
Prawie zawsze. Za kilka centów dostajesz IP, które są twoje, a nie współdzielone, zweryfikowane do rzeczywistego użytku, stabilne, a nie zmieniające się, z możliwością celowania geograficznego i zaszyfrowane, więc nikt nie rejestruje twojego ruchu. Kiedy zliczysz czas inżynierski i nieudane uruchomienia, które kosztuje darmowa lista, tanie płatne proxy są zazwyczaj tańszą opcją ogólnie.
Darmowe listy proxy są darmowe jak znaleziony pendrive: cena jest płacona później, w nieudanych zadaniach, zmarnowanych godzinach i ryzyku tego, co działa po drugiej stronie. Zrób uczciwą matematykę, a tania, czysta pula wygrywa pod względem kosztów i bezpieczeństwa jednocześnie.