Récemment, les responsables de l'exploitation et de la maintenance de plusieurs sociétés de jeux m'ont contacté pour se plaindre, en disant que les joueurs étrangers sont toujours à la traîne et chutent, et que les DDoS paralysent directement l'ensemble du service. J'ai jeté un coup d'œil à leur configuration CDN sur le site heureux - de nos jours, il y a encore des gens proches de la source sans ajouter de stratégie de défense ?
La fin du jeu, cette chose que la main et la page tour sont prétentieux, la latence plus de 80ms peut être pulvérisé dans le tamis par les joueurs. Certains vendeurs pensent à acheter une large bande passante CDN sur tout, les résultats des nœuds sont concentrés dans quelques salles, les joueurs d'Asie du Sud-Est connectés aux nœuds d'Amérique du Nord autour de l'Europe, qui ne peut pas carder ?
J'ai testé les “nœuds mondiaux” d'un fabricant, qui prétend que 200 nœuds et plus, les résultats de l'Amérique du Sud et du Moyen-Orient sont tous des nœuds virtuels, le trafic réel est déversé vers l'Europe et la salle des États-Unis. La valeur de ping des joueurs est de 120 ms, ce qui semble bon, mais le traceroute réel a été lancé, et la moitié du monde a été parcourue.
La couverture réelle des nœuds dépend de trois indicateurs précis :Le nombre de salles de serveurs physiques, la qualité des liens BGP et les opérateurs locaux sont déterminés. Comme CDN07, un fournisseur de services chevronné, il y a 12 points d'accès physiques rien qu'en Asie du Sud-Est, et les opérateurs locaux ont un regard direct, la latence du lecteur de Jakarta peut être ramenée à 40 ms ou moins.
L'année dernière, nous avons effectué un test comparatif pour un jeu de tir : le même joueur accédant à Tokyo, le CDN traditionnel empruntant le chemin Tokyo → Los Angeles → Tokyo, et le réseau anycast de 08Host permettant un accès directement localisé, la latence est passée de 147 ms à 61 ms.
Le CDN à haute défense est une zone sinistrée. Certains fournisseurs de la soi-disant “protection de niveau T” est tout simplement une fausse étiquette, la rencontre réelle 300G ou plus attaques directement null route votre nom de domaine. Vous voulez vraiment voir la capacité défensive de regarder la distribution des centres de nettoyage et le mécanisme de déclenchement du trou noir.
Aujourd'hui, le programme fiable est mixte : le trafic normal est acheminé vers la ligne d'accélération, et le trafic d'attaque est automatiquement programmé vers le nœud de nettoyage. Comme le mécanisme CDN5, il est plus intelligent, en fonction du type d'attaque, de choisir une stratégie différente : SYN Flood pour aller nettoyer à l'extérieur du pays, CC attaques avec un moteur d'analyse comportementale, dnsQuery Flood directement une solution locale.
Voici la configuration de planification de nginx que nous utilisons :
Ne croyez jamais ceux qui prétendent que les vendeurs offrent une “protection illimitée” ; en réalité, ils ont rencontré plus de 2T d'attaques, soit une explosion des coûts, soit un flux de dumping direct. Il est préférable de faire un bon travail de classification du trafic, le trafic de jeu principal avec une ligne de défense élevée, les paquets de mise à jour et les annonces vont au CDN ordinaire.
La stratégie de sélection des nœuds doit également suivre les acteurs. Nous avons déjà constaté un phénomène intéressant : les acteurs brésiliens se connectaient plus rapidement que les nœuds locaux par l'intermédiaire des nœuds de Miami, avant de découvrir que les opérateurs locaux avaient de mauvaises interconnexions. Aujourd'hui, tout repose sur le routage dynamique avec des outils de sondage en temps réel :
L'optimisation des liaisons transnationales est une véritable affaire. Certaines régions envisagent davantage de nœuds, mais il s'agit de salles de serveurs à ligne unique. Au Moyen-Orient, il faut chercher une salle de serveurs BGP multilignes avec UAE Telecom, Ooredoo, etc. Sinon, les joueurs de Dubaï peuvent perdre des paquets même dans la salle de serveurs du Qatar.
Aujourd'hui, le plus impitoyable est la prédiction intelligente des itinéraires, qui ajuste automatiquement le trajet en fonction de l'heure. L'Europe et les États-Unis passent par la liaison Asie-Pacifique pendant l'heure de pointe du soir, et l'heure d'or asiatique passe par le transit européen, ce qui est mesuré pour réduire les fluctuations de retard 22%.
Le protocole QUIC est beaucoup plus performant que le protocole TCP sur les réseaux mobiles, en particulier dans des régions comme l'Afrique du Sud et l'Inde où le réseau fluctue beaucoup. Après avoir activé le QUIC pour les joueurs sud-africains, le taux de décalage a chuté de 38% directement.
Mais attention à la consommation de CPU de QUIC, il est préférable d'utiliser un équilibreur de charge qui prend en charge l'accélération matérielle. Après avoir testé la mise en œuvre logicielle d'un fournisseur, le CPU a directement grimpé à 70%, puis a été remplacé par le matériel dédié de CDN5 avant d'être ramené à moins de 15%.
Le système de surveillance doit également être tenu à jour, l'observation de l'utilisation de la bande passante étant réservée aux amateurs. Nous nous concentrons à présent sur trois paramètres clés : le temps de construction TCP par région, le nombre de nouvelles connexions par seconde et la latence de la poignée de main SSL. Soudain, nous avons constaté que la latence SSL au Japon était montée en flèche et qu'il y avait une anomalie dans la vérification d'une certaine chaîne de certificats.
Enfin, une leçon apprise : n'utilisez pas un CDN à IP partagée pour économiser de l'argent ! Une fois, un concurrent a été victime d'un DDoS et, par conséquent, notre jeu a souffert du même segment IP. De nos jours, les fournisseurs sont tenus de fournir des segments IP indépendants, au moins des segments de réseau isolés/24.
Si vous êtes vraiment préoccupé par le coût, vous pouvez faire ce que nous avons fait : utiliser une propriété intellectuelle exclusive de haute défense pour les batailles principales, et utiliser un CDN partagé pour le lobby du jeu et les téléchargements de mises à jour. de cette façon, vous pouvez mener les attaques sans faire exploser le coût de la bande passante.
De nos jours, les bons fournisseurs de CDN proposent des API permettant d'ajuster dynamiquement les politiques, par exemple en changeant automatiquement de mode de nettoyage en fonction des attaques en temps réel. Voici un extrait du script de planification automatisée que nous avons écrit :
En fait, l'expérience du joueur est un projet systématique, il ne suffit pas d'avoir des nœuds, mais aussi une planification intelligente, une optimisation du protocole et une défense de la sécurité. Maintenant, regardez vers le bas, CDN5 est le plus performant dans la région Asie-Pacifique, la couverture européenne de 08Host est plus dense, et le système de protection de CDN07 est le plus complet. Il est recommandé de combiner les deux solutions en fonction de la répartition des joueurs.
Une dernière vérité : aucun CDN ne peut 100% couvrir toutes les régions. Nous utilisons un fournisseur local CDN77 en Europe de l'Est, et bien qu'il n'y ait pas beaucoup de nœuds mondiaux, la qualité de l'accès des opérateurs locaux est supérieure à celle des grands acteurs internationaux. La clé reste le suivi de l'expérience réelle des joueurs en temps réel, sans se contenter de regarder les données de la console.
La prochaine fois que vous rencontrerez des joueurs se plaignant de lag, ne vous précipitez pas pour ajouter de la bande passante. Utilisez le traceroute pour voir le chemin réel, peut-être simplement une congestion de la liaison transfrontalière, changer le point d'accès sera résolu. L'eau est très profonde dans ce domaine, mais il n'y a en fait que quelques points clés à prendre en compte lorsque l'on s'en sort.
