/24 subnet diversity in proxy lists, explained

Was ist ein /24-Subnetz?

Ein /24 ist ein Block aus 256 aufeinanderfolgenden IPv4-Adressen, die ihre ersten 24 Bits teilen, also ihre ersten drei Zahlen. 203.0.113.24 und 203.0.113.97 liegen im selben /24, 203.0.113.0/24. 198.51.100.7 liegt in einem anderen.

Die Zahl nach dem Schrägstrich ist die Präfixlänge aus der CIDR-Notation (RFC 4632): Sie zählt die festen Bits. Ein /24 legt 24 von 32 Bits fest und lässt 8 Bits übrig, also 2^8 = 256 Adressen. Ein /23 umfasst 512, ein /22 umfasst 1.024 und so weiter. Im globalen BGP-Routing akzeptieren die meisten Netzwerke keine IPv4-Ankündigungen, die kleiner als ein /24 sind, daher ist ein /24 der kleinste Block, der eigenständig durch das Internet geroutet werden kann.

Warum begrenzen manche Websites die Rate pro Subnetz?

Manche Websites zählen Anfragen pro /24, weil benachbarte Adressen meist zum selben Betreiber und oft zum selben Kunden gehören. Verhält sich eine Adresse in einem Block auffällig, kann eine vorsichtige Website den ganzen Block drosseln oder herausfordern, statt jede Adresse einzeln zu verfolgen.

Für dich hat das zwei Auswirkungen:

• Gemeinsames Schicksal. Zehn IPs in einem /24 können sich auf solchen Websites eine Reputation oder ein Limit teilen. Ein Problem, das ein früherer Nutzer einer benachbarten Adresse verursacht hat, kann auch dich treffen.
• Keine zusätzliche Kapazität. Wendet eine Website ihr Limit pro Subnetz an, bringen mehr IPs im selben /24 für diese Website nichts. Das ist ein Grund, das Limit zu respektieren, statt es zu umgehen: Der Sizing-Guide erklärt, warum das Tempo einer Website für deinen gesamten Job gilt.

Viele Websites schauen gar nicht auf Subnetze. Subnetz-Diversität zählt vor allem für Redundanz: IPs über mehrere Blöcke zu verteilen bedeutet, dass ein blockierter Block nicht jeden Job stoppt.

Enthalten RackProxies-Bestellungen mehrere /24-Subnetze?

Sie können, aber wir versprechen keine Anzahl. Eine Bestellung mehrerer IPs kann Adressen aus mehr als einem /24-Subnetz enthalten, aber es wird keine Mindestanzahl an Subnetzen zugesagt. Deine IPs stammen von vorgelagerten Hosting-Partnern, und die Mischung der Blöcke hängt davon ab, was im gewählten Land und in der gewählten Stadt online ist.

Wenn dein Job IPs in mehr als einem /24 braucht, sag es dem Support vor oder nach dem Kauf; wir sagen dir, was der aktuelle Bestand erlaubt. Ersatz folgt der üblichen Regel. Wenn eine IP nicht funktioniert oder für eine rechtmäßige Nutzung unbrauchbar ist, schreib dem Support: Wir reparieren sie oder ersetzen sie durch eine IP im selben Land, abhängig vom Bestand. Bestellungen in mehreren Ländern oder Städten verteilen sich von Natur aus über verschiedene Netzwerke, weil jeder Standort eigene Blöcke hat.

Wie prüfe ich die Subnetze in meiner Proxy-Liste?

Gruppiere die IPs nach ihrem /24 und zähle jede Gruppe. Lade deine Liste als TXT aus deinem Konto herunter (eine IP:PORT:USERNAME:PASSWORD-Zeile pro IP; siehe Verbindungsformat) und führe das folgende Skript mit Python 3 aus. Es nutzt nur die Standardbibliothek.

"""Group a proxy list by /24 subnet. Input: one IP:PORT:USERNAME:PASSWORD per line."""
import ipaddress
import sys
from collections import Counter

path = sys.argv[1] if len(sys.argv) > 1 else 'proxies.txt'
subnets = Counter()
with open(path, encoding='utf-8') as handle:
    for line in handle:
        line = line.strip()
        if not line:
            continue
        ip = line.split(':')[0]
        network = ipaddress.ip_network(ip + '/24', strict=False)
        subnets[str(network)] += 1

total = sum(subnets.values())
print(total, 'IPs in', len(subnets), 'distinct /24 subnets')
for network, count in subnets.most_common():
    print(f'{network:<18} {count:>4} IPs  ({count / total:.0%})')

6 IPs in 3 distinct /24 subnets
203.0.113.0/24        3 IPs  (50%)
198.51.100.0/24       2 IPs  (33%)
192.0.2.0/24          1 IPs  (17%)