/24 subnet diversity in proxy lists, explained

Qu'est-ce qu'un sous-réseau /24 ?

Un /24 est un bloc de 256 adresses IPv4 consécutives qui partagent leurs 24 premiers bits, c'est-à-dire leurs trois premiers nombres. 203.0.113.24 et 203.0.113.97 sont dans le même /24, 203.0.113.0/24. 198.51.100.7 est dans un autre.

Le nombre après la barre oblique est la longueur de préfixe de la notation CIDR (RFC 4632) : il compte les bits fixes. Un /24 fixe 24 bits sur 32, laissant 8 bits, donc 2^8 = 256 adresses. Un /23 en contient 512, un /22 en contient 1 024, et ainsi de suite. En routage BGP global, la plupart des réseaux n'acceptent pas les annonces IPv4 plus petites qu'un /24, donc un /24 est le plus petit bloc qui peut être routé seul sur Internet.

Pourquoi certains sites limitent-ils le débit par sous-réseau ?

Certains sites comptent les requêtes par /24 car les adresses voisines appartiennent généralement au même opérateur et souvent au même client. Si une adresse d'un bloc se comporte mal, un site prudent peut ralentir ou défier tout le bloc plutôt que de traquer chaque adresse.

Pour vous, cela a deux effets :

• Sort partagé. Dix IP dans un même /24 peuvent partager une réputation ou une limite sur ces sites. Un problème causé par un utilisateur précédent d'une adresse voisine peut vous atteindre.
• Aucune capacité supplémentaire. Si un site applique sa limite par sous-réseau, plus d'IP dans le même /24 n'apportent rien pour ce site. C'est une raison de respecter la limite, pas de la contourner : le guide de dimensionnement explique pourquoi le rythme d'un site s'applique à l'ensemble de votre tâche.

Beaucoup de sites ne regardent pas du tout les sous-réseaux. La diversité des sous-réseaux compte surtout pour la redondance : répartir les IP sur plusieurs blocs signifie qu'un bloc bloqué n'arrête pas toutes les tâches.

Les commandes RackProxies incluent-elles plusieurs sous-réseaux /24 ?

Elles le peuvent, mais nous ne promettons pas un nombre. Une commande de plusieurs IP peut inclure des adresses provenant de plusieurs sous-réseaux /24, mais aucun nombre minimum de sous-réseaux n'est promis. Vos IP proviennent de partenaires d'hébergement en amont, et le mélange de blocs dépend de ce qui est en ligne dans le pays et la ville que vous choisissez.

Si votre tâche a besoin d'IP dans plus d'un /24, dites-le au support avant ou après l'achat ; nous vous dirons ce que le stock actuel permet. Les remplacements suivent la règle habituelle. Si une IP ne fonctionne pas ou est inutilisable pour un usage licite, écrivez au support : nous la réparons ou la remplaçons par une IP dans le même pays, sous réserve de stock. Les commandes dans plusieurs pays ou villes sont réparties sur différents réseaux par nature, car chaque emplacement a ses propres blocs.

Comment vérifier les sous-réseaux dans ma liste de proxys ?

Regroupez les IP par leur /24 et comptez chaque groupe. Téléchargez votre liste au format TXT depuis votre compte (une ligne IP:PORT:USERNAME:PASSWORD par IP ; voir le format de connexion) et exécutez le script ci-dessous avec Python 3. Il n'utilise que la bibliothèque standard.

"""Group a proxy list by /24 subnet. Input: one IP:PORT:USERNAME:PASSWORD per line."""
import ipaddress
import sys
from collections import Counter

path = sys.argv[1] if len(sys.argv) > 1 else 'proxies.txt'
subnets = Counter()
with open(path, encoding='utf-8') as handle:
    for line in handle:
        line = line.strip()
        if not line:
            continue
        ip = line.split(':')[0]
        network = ipaddress.ip_network(ip + '/24', strict=False)
        subnets[str(network)] += 1

total = sum(subnets.values())
print(total, 'IPs in', len(subnets), 'distinct /24 subnets')
for network, count in subnets.most_common():
    print(f'{network:<18} {count:>4} IPs  ({count / total:.0%})')

6 IPs in 3 distinct /24 subnets
203.0.113.0/24        3 IPs  (50%)
198.51.100.0/24       2 IPs  (33%)
192.0.2.0/24          1 IPs  (17%)