La désactivation du matchmaking basé sur les compétences a transformé Call of Duty en un mauvais endroit

Activision Blizzard a publié un long livre blanc qui explique ce qui s'est passé lorsque le matchmaking basé sur les compétences (SBMM) a été réduit dans Call of Duty. La version TL: DR ? Presque tout le monde l'a détesté.

La société a cherché à explorer comment le SBMM impacte les joueurs de différentes manières, ce qui l'a amenée à lancer un 'Test de dépriorisation des compétences' dans Call of Duty: Modern Warfare III plus tôt cette année.

L'expérience a vu le studio exploiter sa structure de test A/B pour assouplir les contraintes sur les compétences en matchmaking. Elle a réalisé le test en 2024 en Amérique du Nord et a établi un groupe de traitement comprenant 50 pour cent de la population. L'autre moitié des joueurs est restée inchangée.

Les taux de retour des joueurs ont diminué lorsque le matchmaking basé sur les compétences a été assoupli

Ceux qui ont subi une réduction du SBMM sans le savoir n'étaient pas satisfaits. Après un mois de test, Activision a classé la population de traitement en 10 groupes également de taille — triés par compétence. Avec la dépriorisation du SBMM, les taux de retour des joueurs ont diminué de manière significative pour 90 pour cent des joueurs. Seuls les 10 pour cent de joueurs les plus talentueux sont revenus en plus grand nombre, mais au niveau agrégé, Activision Blizzard a vu 'moins de joueurs revenir au jeu de manière significative'.

'Cet effet peut sembler faible, mais ce changement était observable pendant la durée du test. Cela se cumulera dans le temps, tout comme les intérêts, et aura un impact significatif sur notre population de joueurs. C'est une préoccupation pour tous les joueurs, y compris les 10 pour cent les plus performants, car si ce schéma se poursuit, les joueurs quitteront le jeu en plus grand nombre', a expliqué l'entreprise.

'Finalement, un joueur figurant parmi les 10 pour cent les plus performants deviendra un joueur figurant parmi les 20 pour cent les plus performants, et finalement un joueur figurant parmi les 30 pour cent les plus performants, jusqu'à ce que seuls les meilleurs joueurs restent à jouer. Ces joueurs initialement les meilleurs deviendront de plus en plus susceptibles de ne pas revenir au jeu. En fin de compte, cela entraînera une expérience de jeu de qualité inférieure pour tous les joueurs, car il y aura de moins en moins de joueurs disponibles pour jouer. De plus, comme mentionné ci-dessus, ce test a uniquement dépriorisé la compétence dans les règles de correspondance. S'il était complètement supprimé, nous nous attendrions à voir la population de joueurs s'effriter rapidement en l'espace de quelques mois.'

Les joueurs touchés par le Test de dépriorisation des compétences étaient également plus susceptibles d'abandonner en plein jeu, Activision Blizzard expliquant que le taux d'abandon augmentait 'significativement' pour 80 pour cent des joueurs. Seuls les 10 pour cent de joueurs les plus talentueux ont vu une diminution significative des taux d'abandon, mais Activision Blizzard a noté que les avantages seraient éphémères.

'A mesure que le départ accéléré des joueurs dans les niveaux de compétences inférieurs s'installe, les joueurs figurant parmi les 10 pour cent les plus performants dériveront finalement vers le bas de la distribution de compétences (comme les joueurs initialement les meilleurs constitueront une part de plus en plus importante de la base de joueurs)', a-t-il déclaré. 'En conséquence, nous nous attendons à ce que les joueurs qui étaient initialement parmi les 10 pour cent les plus performants quittent les jeux à des taux croissants lorsqu'ils deviennent des joueurs du 50e percentile après le départ de la plus grande partie de la population de compétences inférieures du jeu.'

Team Death Match a connu plus de victoires écrasantes

Le nombre de 'victoires écrasantes' en Team Death Match (TDM) a également augmenté. Activision Blizzard a expliqué qu'une victoire écrasante se produit lorsqu'une équipe dans un salon 'gagne avec un écart de score supérieur à 30', ce qui signifie qu'elle a complètement battu l'opposition. Il a déclaré que le nombre de victoires écrasantes avait augmenté pour tous les joueurs du Test de dépriorisation des compétences dans les salons TDM, ce qui signifie que tout le monde s'amusait probablement moins. 'Nous observons des résultats similaires dans d'autres modes de jeu', a-t-il ajouté.

En suivant d'autres indicateurs tels que les Tués Par Minute (KPM) et les Points Par Minute (PPM) à travers les salons impactés par l'expérience, on a constaté que les joueurs moins talentueux se débrouillaient généralement moins bien, tandis que les 10 pour cent les plus performants étaient capables de 'dominer'.

'Le nombre de tués par minute est en baisse de manière significative pour les 20 à 30 pour cent de joueurs les moins bons. Les 60 pour cent de joueurs suivants n'ont pas de changement significatif, et les 10 pour cent les plus performants voient des KPM significativement plus élevés', a déclaré Activision Blizzard. 'Comme KPM, PPM suit une tendance similaire. Les joueurs moins talentueux se débrouillent moins bien, tandis que les 10 pour cent les plus performants peuvent dominer. Comme pour KPM, nous nous attendons à ce que les joueurs se déplacent vers la gauche de cette distribution avec le temps, alors que les joueurs moins talentueux reviennent au jeu à des taux plus faibles.

L'utilisation de séries de victimes et l'augmentation de KPM et PPM montrent que l'écart de percentile de compétences plus large dans le salon est disproportionnellement exploité par les 10 pour cent de joueurs les plus performants. Malheureusement, cette augmentation des performances se fait au détriment de la population beaucoup plus grande de 30 pour cent vers le bas de la distribution de compétences.'

Pesant de manière plus large, Activision Blizzard a déclaré que son dernier test et les expériences historiques montrent un lien clair entre le SBMM et la rétention des joueurs.

'Nous pouvons voir que l'assouplissement des compétences impacte négativement notre capacité à maintenir l'intérêt des joueurs pour notre jeu', a-t-il déclaré. 'Dans un test similaire au Test de dépriorisation des compétences discuté ci-dessus, nous avons pu constater une diminution significative du nombre de joueurs jouant à Call of Duty: Modern Warfare (2019) et une augmentation du taux global d'abandon des matchs, lorsqu'ils étaient traités avec un matchmaking plus lâche. Les tentatives ultérieures de protéger uniquement les 25 pour cent inférieurs des joueurs et de permettre un matchmaking plus lâche pour les 75 pour cent restants des joueurs ont également eu des indicateurs négatifs clairs de 'plaisir' auto-déclarés.'

Vous pouvez lire le livre blanc complet sur le site web d'Activision Blizzard.