Ultima modifica da un moderatore:
Web Unlocker - Il servizio che eviterà il blocco del tuo indirizzo IP
1 Il problema
In questo periodo storico sempre più motori di ricerca o apparecchiature server stanno implementando misure di sicurezza basate sul blocco di un IP o di un determinato fingerprint. Un esempio lampante è Google, il quale dopo qualche ricerca "insolita" (tramite google dorks, per esempio) mette l'IP del richiedente in uno stato di soft-ban, finchè non viene risolto il reCaptcha da loro proposto.
Altri siti, come ad esempio TikTok o Epic Games, bannano direttamente l'IP in caso di eccessivo traffico o di presunto traffico malevolo, rendendo molto difficile la scansione (o addirittura l'attacco) di questi ultimi.
Una delle possibili soluzioni per ovviare al problema potrebbe essere quella di usare una VPN, ma si dovrebbe mettere in piedi un meccanismo di switch automatico dell' IP ad ogni blocco da parte del target. Una seconda alternativa potrebbe essere l'utilizzo di Tor, ma anche in questo caso non è sempre fattibile dato che molto spesso gli IP abbinati a Tor vengono già blacklistati di default dai vari siti online.
Come fare allora?
2 La soluzione: Web Unlocker
La soluzione la mette a disposizione Bright Data (formerly Luminati Networks) tramite la feature "Web Unlocker", il primo tool di sblocco automatico di siti web per raggiungere i target con tassi di successo senza precedenti.
Bright Data permette di avere un vasto range di indirizzi IP di vario tipo (Data Server, Residential, Mobile, etc.) da cui poter uscire, ruotando ed inviando le varie richieste attraverso decine di browser fingerprints in maniera del tutto automatica, gestendo lo sblocco dal ban o soft-ban in maniera autonoma con un success rate del 100%!
Una classica ma altrettanto semplice richiesta effettuabile tramite Bright Data potrebbe essere la seguente
Codice:
curl -k --proxy lum-customer-<id>-zone-<zone_name>-unblocker:<password>@zproxy.lum-superproxy.io:22225 https://example.com
3 Use cases:
Per quanto la funziona di Web Unlock (combinata con i numerosi proxy messi a disposizione) possa non sembrare un "Game Changer", essa in realtà semplifica drasticamente tantissime tipologie di attività e casi di utilizzo. Analizziamone assieme qualcuna:
3.1 Web Data Extraction
Usare molteplici IP residenziali in rotazione tra di loro permette di estrarre dati da siti web di tutto il mondo in maniera accurata e sicura.
Oggi, per rimanere competitivi e offrire ai consumatori i migliori prodotti o prezzi possibili, le aziende hanno bisogno di dati, dati che una volta erano disponibili apertamente ma che ora, invece, quasi ogni azienda raccoglie (o compra) in qualche determinata forma, autonomamente. Le aziende si concentrano sulla raccolta dei dati il più accurati e critici possibile, in modo da favorire la loro crescita ed esposizione. L'estrazione dei dati può consistere nella raccolta di dati dai siti web (in modo da ottenere informazioni sui prezzi, per esempio), nella scansione di documenti pubblici per la conoscenza legale o nello scraping dei social media per ottenere i dati delle persone.
Oggi, per rimanere competitivi e offrire ai consumatori i migliori prodotti o prezzi possibili, le aziende hanno bisogno di dati, dati che una volta erano disponibili apertamente ma che ora, invece, quasi ogni azienda raccoglie (o compra) in qualche determinata forma, autonomamente. Le aziende si concentrano sulla raccolta dei dati il più accurati e critici possibile, in modo da favorire la loro crescita ed esposizione. L'estrazione dei dati può consistere nella raccolta di dati dai siti web (in modo da ottenere informazioni sui prezzi, per esempio), nella scansione di documenti pubblici per la conoscenza legale o nello scraping dei social media per ottenere i dati delle persone.
3.2 SEO monitoring
Che si tratti di rank tracking, di controllare le traduzioni dei propri siti web, le inserzioni locali o l'indice Google mobile-first, il parametro accuratezza è vitale. Il web opera attraverso i confini e avere accesso agli IP specifici di diversi paesi, città, ISP e ASN può fare un'enorme differenza nei risultati. Capire come si classifichi un record e se il suo contenuto appare nella posizione giusta e nella lingua giusta può fare la differenza tra una strategia di marketing di successo o meno. Smetti di lavorare per tentativi ed errori. Ora hai il mezzo giusto per vedere i tuoi risultati in tempo reale.
3.3 Search Engine Crawler
Con a disposizione IP provenienti da tutto il mondo, scansionare il web e fare crawling e non è mai stato più comodo. E' possibile collezionare dati tramite Google, Bing, Yahoo ecc. ed ottenere informazioni sui siti visitati dall'altra parte del globo. Immagina identificare tutti i siti online che utilizzano un determinato CMS, che espongono una determinata pagina o che magari siano vulnerabili all'ultimo exploit pubblicato una settimana fa... Trovare e avere queste informazioni ora p possibile!
3.4 Website Testing
Avere a disposizione molteplici IP è sicuramente un vantaggio quando si tratta di testare siti web, in quanto consente di non venir bannati, di vedere il target da molteplici punti di vista (in base alla regione, all'User-Agent, ecc.) e di controllare le sue performance in base alla propria posizione nel mondo. E' ideale sia per penetration tester che per sviluppatori e permette di emulare veri e propri utenti provenienti da tutte le parti del globo, ognuno differente da un altro. Immaginare testare tutte le directory o i file esposti da un sito web e, nel mentre, cambiare ogni volta IP e fingerprint. Risulterà impossibile ricollegare tutte queste informazioni ad un unico utente e bloccarlo. Possiamo finalmente concentrarci sulle analisi senza doverci preoccupare di venir bloccati... finalmente!
