Residential-Proxies
Residential-Proxies leiten den Datenverkehr Ihrer Anwendung über Internetanschlüsse privater Haushalte weiter. Die Zielwebsite sieht die öffentliche IP-Adresse, die dem ausgewählten Hausanschluss zugewiesen ist. So können Sie eine Website aus einem Privatkundennetz an einem anderen Standort besuchen, ohne selbst dort zu sein.
Residential-Proxies gehören zu den wichtigsten Proxy-Netzwerktypen. Die Bezeichnung beschreibt das Netzwerk, über das der Datenverkehr ins Internet gelangt. Viele Dienste stellen diese Ausgänge über einen großen Pool bereit. Ein Residential-Proxy kann aber auch einen einzelnen Hausanschluss nutzen. Die Herkunft der IP-Adresse, die Anzahl der Kunden, die sie verwenden, und der Zeitpunkt von IP-Wechseln sind getrennte Eigenschaften.
So funktionieren Residential-Proxies
Bei einem Dienst mit IP-Pool verbinden Sie sich normalerweise mit einem Gateway des Proxyanbieters. Seine Adresse ist der Einstiegspunkt für Ihre Anwendung. Das Gateway wählt einen Residential-Ausgang aus und führt die Verbindung darüber weiter.
- Ihre Anwendung verbindet sich mit dem Gateway. Die Zugangsdaten identifizieren das Konto; Standort- und Sitzungseinstellungen beschreiben die benötigte Verbindung.
- Das Gateway wählt einen verfügbaren Ausgang. Ein Länderfilter beschränkt die Auswahl beispielsweise auf geeignete Hausanschlüsse im betreffenden Land.
- Software am ausgewählten Ausgang leitet den Datenverkehr über dessen privaten Internetanschluss weiter. Das Ziel sieht die öffentliche IP-Adresse dieses Anschlusses, nicht die ursprüngliche IP-Adresse Ihrer Anwendung oder die Gateway-Adresse.
- Die Antwort gelangt über den ausgewählten Ausgang und das Gateway zurück zu Ihrer Anwendung. Der Browser oder Parser arbeitet weiterhin auf Ihrem eigenen Gerät.
Die Gateway-Adresse und die Ausgangs-IP-Adresse sind also unterschiedliche Adressen mit unterschiedlichen Aufgaben. Sie können dieselben Gateway-Einstellungen beibehalten und für verschiedene Verbindungen unterschiedliche Haushaltsausgänge nutzen. Die private Adresse eines Geräts innerhalb eines Heimnetzwerks ist nicht die Adresse, die die Website sieht.
Ein Telefon, das über das WLAN zu Hause verbunden ist, kann als Residential-Ausgang dienen. Läuft die ausgehende Verbindung stattdessen über den Mobilfunkanbieter, handelt es sich um einen Mobilfunkausgang. Nicht die Bauform des Geräts bestimmt den Proxytyp, sondern das Netzwerk der ausgehenden Verbindung.
Residential bezeichnet auch kein Proxyprotokoll. Die Anwendung benötigt weiterhin ein vom Dienst unterstütztes Protokoll, etwa HTTP oder SOCKS5. Die Auswahl einer Haushalts-IP-Adresse ändert weder Cookies und Sprache des Browsers noch dessen Geräteeinstellungen.
Woher Residential-Verbindungen stammen
Netzwerke teilnehmender Geräte
Ein verbreitetes Modell verbindet Geräte, deren Besitzer einen Teil ihrer Internetverbindung freigeben. Eine eigene Anwendung oder eine als SDK bezeichnete Softwarekomponente innerhalb einer anderen Anwendung macht das Gerät als Proxy-Ausgang verfügbar. In einem Netzwerk mit ausdrücklicher Einwilligung stimmt der Teilnehmer dieser Nutzung gegen Bezahlung oder einen Vorteil innerhalb der Anwendung zu.
Prüfen Sie vor der Auswahl eines Anbieters, wie Geräteinhaber über den fremden Datenverkehr informiert werden und wie sie ihre Teilnahme beenden können.
Der Kunde kauft Zugang zu dem so entstandenen Pool. Der Proxyanbieter betreibt die Gateways, wählt Ausgänge aus und erfasst, welche Verbindungen verfügbar sind. Die Haushalte behalten ihre Geräte und Internetverträge. Der Pool kann sich ändern, wenn Geräte die Verbindung herstellen oder trennen oder eine andere öffentliche IP-Adresse erhalten.
Ein einzelner Hausanschluss
Ein großer Teilnehmerpool ist keine Voraussetzung für einen Residential-Proxy. Der Proxy kann auf einem Gerät laufen, das mit einem einzigen privaten Breitbandanschluss verbunden ist, etwa auf einem Computer, der an einem bestimmten Standort online bleibt. Der Anschluss kann Ihnen gehören oder einem Kunden zur Nutzung bereitgestellt werden. Es handelt sich um einen einzelnen Ausgang statt um den Zugang zu einer weltweiten Auswahl.
Die Betriebsdauer hängt davon ab, wie das Gerät und der Anschluss betreut werden. Ein dauerhaft eingeschaltetes Gerät kann eine längere Nutzung ermöglichen. Die öffentliche Adresse richtet sich jedoch weiterhin nach den Vergaberegeln des Internetanbieters. Eine feste öffentliche IP-Adresse und ein lange laufendes Gerät sind nicht dasselbe.
Das erklärt auch eine häufige Überschneidung bei den Bezeichnungen. Angebote namens „Static Residential“ meinen oft ISP-Proxies: Ihre IP-Adressen gehören zu Netzwerken von Internetanbietern, während der Proxy auf Serverinfrastruktur läuft. Das unterscheidet sich von der Weiterleitung über einen tatsächlichen privaten Breitbandanschluss.
Vorteile von Residential-Proxies
Zugang aus Privatkundennetzen
Manche Websites behandeln Datenverkehr aus Hosting-Netzwerken restriktiver als Datenverkehr von Internetanbietern privater Haushalte. Ein Residential-Ausgang ändert die Netzwerkherkunft der Verbindung. Das kann bei Zielen helfen, die Rechenzentrumsadressen ablehnen, obwohl die Anwendung selbst korrekt eingerichtet ist.
Der Vorteil entsteht durch ein geeignetes Quellnetzwerk. Die Website kann weiterhin den Ruf der IP-Adresse, Anfragemuster und Browsersignale bewerten. Eine Haushaltsadresse macht nicht automatisch jede Anfrage akzeptabel.
Auswahl an Standorten und Internetanbietern
Ein verteilter Pool ermöglicht Beobachtungen aus verschiedenen Ländern und, sofern unterstützt, aus Regionen oder Städten. Bei manchen Diensten können Sie auch einen ISP oder eine ASN auswählen – die Nummer, die einen Netzbetreiber im Internet kennzeichnet. Das hilft, wenn sich dieselbe Website in verschiedenen örtlichen Netzwerken unterschiedlich verhält.
Die geografische oder netzbezogene Auswahl bestimmt eine verfügbare Verbindung, die zu den Standort- oder Netzwerkdaten des Dienstes passt. Sie versetzt keine Adresse in die ausgewählte Stadt. Der Standort einer IP-Adresse ist kein genauer Haushaltsstandort. Eine Website kann die Adresse zudem anders einordnen. Zusätzliche Filter verkleinern die Auswahl; nicht jeder Dienst unterstützt jede Kombination.
Viele Ausgänge in unterschiedlichen Netzwerken
Statt an jedem Standort eigene Anschlüsse zu organisieren, kann ein Kunde über einen Dienst viele Haushaltsausgänge erreichen. Das ist nützlich, um Beobachtungen aus verschiedenen Netzwerken zu wiederholen und voneinander unabhängige Erfassungsaufgaben auf mehrere Adressen zu verteilen.
Die beworbene Größe eines Pools und seine aktuell verfügbaren Ausgänge messen unterschiedliche Dinge. Eine Monatssumme kann Adressen enthalten, die zu verschiedenen Zeitpunkten online waren. Die Auswahl in einer bestimmten Stadt oder bei einem bestimmten ISP ist gewöhnlich deutlich kleiner als der weltweite Pool.
Grenzen von Residential-Proxies
Die Geschwindigkeit hängt vom ausgewählten Anschluss ab
Der Übertragungsweg umfasst den Proxydienst und einen privaten Internetanschluss, jeweils mit eigener Kapazität und Entfernung zum Ziel. Ein schnelles Gateway kann einen langsamen oder ausgelasteten Hausanschluss nicht beschleunigen. Zwei Ausgänge in derselben Stadt können deutlich unterschiedliche Antwortzeiten liefern.
Auch parallele Aufgaben beanspruchen die Ressourcen des ausgewählten Ausgangs. Mehr Verbindungen über einen Haushalt schaffen keine zusätzliche Bandbreite. Ein großer Pool hilft, die Arbeit zu verteilen, gibt aber nicht jeder Adresse die Kapazität eines Servers im Rechenzentrum.
Ein bestimmter Ausgang kann ausfallen
In einem Teilnehmernetzwerk kann ein Gerät ausgeschaltet, die Freigabeanwendung angehalten oder die Verbindung gewechselt werden. Ein betreuter Einzelanschluss bleibt möglicherweise länger verfügbar. Seine Geräte und sein Internetdienst bestimmen jedoch ebenfalls, ob die Verbindung bestehen bleibt.
Der Anbieter kann einen anderen geeigneten Ausgang bereithalten, doch dieser Ersatz hat eine andere IP-Adresse. Ein verfügbarer Pool bedeutet deshalb nicht, dass eine bestimmte Adresse während Ihrer gesamten Aufgabe verfügbar bleibt. Die Zugangsarten weiter unten erklären, wie Rotation und Sticky Sessions mit dem ausgewählten Ausgang umgehen.
Fällt die ausgewählte Verbindung weg, kann ein Anbieter einen Fehler zurückgeben oder eine andere IP-Adresse einsetzen. Prüfen Sie, auf welches Verhalten Ihr Programm reagieren muss.
Das Datenvolumen kann die Kosten bestimmen
Der Zugang zu Residential-Pools wird häufig nach übertragenem Datenvolumen abgerechnet, meist in Gigabyte. Bei diesem Modell kann ein Browser, der Bilder, Videos und Hintergrundressourcen lädt, deutlich mehr kostenpflichtiges Datenvolumen verbrauchen als eine Anfrage mit einer kleinen Datenantwort. Wiederholte fehlgeschlagene Versuche können die Gesamtsumme nach den Abrechnungsregeln des Dienstes erhöhen.
Das Wort Residential legt das Abrechnungsmodell nicht fest. Für einen einzelnen Anschluss oder ein dediziertes Angebot können andere Zahlungsbedingungen gelten. Bei einem volumenbasierten Tarif sind die zur Erledigung der Aufgabe benötigten Daten die sinnvolle Kostengröße, nicht allein die Anzahl verwendeter IP-Adressen.
Wofür Residential-Proxies eingesetzt werden
Residential-Proxies sind nützlich, wenn eine Aufgabe Zugang über Haushaltsnetze, eine Standortauswahl oder viele unterschiedliche Ausgänge benötigt. Die folgenden Aufgaben profitieren besonders von Residential-Pools. Residential-Zugang kann auch über länger verfügbare oder dedizierte Anschlüsse bereitgestellt werden. Rotation definiert nicht die gesamte Kategorie.
Daten von Marktplätzen mit Zugriffsbeschränkungen erfassen
Erfassen Sie Produktdetails, Verkäuferangebote, Bewertungen und Verfügbarkeit auf großen Marktplätzen, die Datenverkehr aus Hosting-Netzwerken einschränken. Ein Rechercheprojekt kann viele öffentliche Seiten aus unterschiedlichen Kategorien und regionalen Websiteversionen benötigen.
Ein Residential-Pool liefert Ausgänge aus verschiedenen Haushaltsnetzen und kann die Datenerfassung darauf verteilen. Das ist hilfreich, wenn Akzeptanz und Adressvielfalt die begrenzenden Faktoren sind. Der Scraper muss weiterhin die Sitzungen, Browserprüfungen und Anfragelimits der Website berücksichtigen.
Shops mit Fälschungen und kopierte Markenauftritte finden
Prüfen Sie verdächtige Onlineshops und Angebote auf kopierte Logos, unerlaubt verwendete Produktfotos und gefälschte Waren. Manche Betreiber zeigen Käufern andere Inhalte als Besuchern aus erkennbaren Überwachungs- oder Hosting-Netzwerken.
Mit Residential-Ausgängen kann ein Team zur Markenüberwachung öffentliche Seiten aus Privatkundennetzen in den betreuten Märkten prüfen. Der Vergleich mehrerer Ausgänge hilft, regionale Shops oder Inhalte zu entdecken, die bei einem einzelnen Besuch aus einem Unternehmensnetzwerk nicht erscheinen.
Die Auslieferung von Anzeigen in verschiedenen Märkten prüfen
Prüfen Sie, ob eine Anzeige auf der vorgesehenen Publisher-Seite erscheint, zur richtigen Zielseite führt und zum Angebot passt, das Nutzern in einem bestimmten Markt gezeigt wird. Wiederholen Sie die Beobachtung aus mehreren Ländern oder verfügbaren örtlichen Gebieten.
Residential-Adressen bieten verschiedene Perspektiven aus Privatkundennetzen, um Platzierungen und Weiterleitungen zu vergleichen. Geprüft wird, welche Inhalte Besucher erhalten. Die Anzeigenauslieferung kann auch von Cookies, Sprache und Gerät abhängen. Diese Einstellungen gehören daher ebenfalls zum Test.
Lokale Suchergebnisse vergleichen
Verfolgen Sie, wie sich Suchergebnisse, örtliche Unternehmen und konkurrierende Seiten zwischen den Städten oder Regionen unterscheiden, in denen ein Unternehmen tätig ist. Ein einzelnes landesweites Ergebnis reicht für ein Unternehmen mit mehreren Standorten nicht aus.
Residential-Pools können die verfügbaren Länder- oder Stadtausgänge für wiederholte örtliche Beobachtungen bereitstellen. Auch die Standorteinstellungen der Suchmaschine und ihre Einordnung der IP-Adresse spielen eine Rolle: Die Auswahl eines Proxys auf Stadtebene legt keine genauen GPS-Koordinaten fest und garantiert keine Ergebnisse für ein bestimmtes Viertel.
Regionale Flug- und Hotelangebote vergleichen
Erfassen Sie Flugpreise, Hotelverfügbarkeit, Währungen und Buchungsbedingungen, die in verschiedenen Märkten angezeigt werden. Reisevergleichsdienste müssen dieselbe Reise oder denselben Aufenthalt mit übereinstimmenden Daten, derselben Belegung und denselben weiteren Sucheinstellungen vergleichen.
Residential-Ausgänge ermöglichen es, diese Suchen aus Privatkundennetzen an den verfügbaren Standorten zu wiederholen. Sie helfen, geografische Unterschiede im angezeigten Angebot zu beobachten. Sie garantieren weder einen günstigeren Preis noch beseitigen sie Preisänderungen aufgrund von Nachfrage, Kontostatus oder Zeitpunkt.
Zugangsarten
Residential-Netzwerke bieten häufig Zugang zu einem gemeinsam genutzten Pool von Haushalts-IP-Adressen. Der Dienst wählt eine verfügbare Verbindung, die zu den Anfrageeinstellungen passt. Ein gemeinsamer Pool kann mehrere Kunden bedienen und verspricht für sich genommen keine exklusive Adresse. Die wichtigste Wahl beim Sitzungsmodus besteht zwischen rotierenden Ausgängen und dem vorübergehenden Beibehalten einer IP-Adresse.
Wie der Dienst Anfragen eine IP-Adresse zuweist
Rotierende IP-Adressen
Der Dienst wählt nach seiner Rotationsregel einen Ausgang aus dem Pool aus, beispielsweise für jede Anfrage oder neue Verbindung. Einzelne Anfragen können über verschiedene Hausanschlüsse laufen.
Dieser Modus eignet sich für unabhängige Anfragen, die nicht dieselbe IP-Adresse benötigen. Eine bereits verwendete Adresse kann später erneut ausgewählt werden.
Sticky Sessions
Anfragen mit derselben Sitzungskennung verwenden im Rahmen der Sitzungsregeln des Dienstes dieselbe Ausgangs-IP-Adresse, solange diese Verbindung verfügbar bleibt. So lässt sich eine Folge von Seiten aufrufen, ohne dass bei jedem Schritt ein planmäßiger IP-Wechsel erfolgt.
Geht der Hausanschluss offline, kann seine IP-Adresse nicht beibehalten werden. Eine Sticky Session ist keine dauerhafte IP-Miete und bedeutet nicht, dass nur Sie die Adresse verwenden.
Wählen Sie den Sitzungsmodus passend zur Aufgabe: Rotierende IP-Adressen eignen sich für unabhängige Anfragen, Sticky Sessions für eine Folge von Aktionen auf derselben Website.