Jooble améliore la satisfaction client grâce à DataDome

Le problème : les crawlers contournent la protection et faussent les analyses

Lorsque vous touchez 70 millions d’utilisateurs humains par mois, il est probable que des hordes de bots scrapeurs veuillent également participer à la fête. Fondé en 2006 en tant que site web d’agrégation d’offres d’emploi, Jooble a toujours eu affaire à des robots d’indexation, aussi longtemps que Nazim Suleimanov, responsable de l’ingénierie, s’en souvienne.

« Au départ, nous avons développé notre propre algorithme pour détecter les
crawlers », explique-t-il, « et pendant au moins 10 ans, cela a plutôt bien fonctionné. Mais les bots devenaient de plus en plus intelligents, et rester en avance sur eux commençait à prendre beaucoup trop de temps. »

Pour Jooble, comme pour d’autres agrégateurs d’offres d’emploi, le principal problème avec les bots est qu’ils faussent les analyses du site web et réduisent les taux de conversion.

« Beaucoup de nos propriétés sont des sites d’agrégation, avec des liens vers d’autres sites web. Si les bots suivent ces liens, nous envoyons effectivement du trafic de bots à nos clients », explique Nazim. « Tout bot que nous pouvons identifier est évidemment éliminé de nos statistiques, donc nos clients ne paient pas pour ce trafic, mais nous savions que nous ne les attrapions pas tous. Nous avions besoin de trouver une solution qui pourrait automatiser le processus de nettoyage du trafic. »

La solution : une protection contre les bots éprouvée et facile à intégrer

Lors de l’évaluation des différents outils, Nazim et son équipe ont accordé une attention particulière aux références clients, au prix et aux options d’intégration.

« Nous voulions une solution déjà utilisée par d’autres grandes entreprises, ce qui prouve qu’elle fonctionne, et bien sûr le prix devait être correct », explique Nazim. « En termes d’intégration, nous cherchions un service qui nous donnerait la flexibilité et le contrôle sur les requêtes à envoyer au fournisseur de gestion des bots. Le fait que DataDome puisse être intégré avec Nginx sur le plan logiciel était un avantage majeur. »

Une fois la décision prise, l’installation de DataDome a été rapide et sans douleur. « C’était très facile », confirme Nazim. « Une personne a réalisé l’intégration, et cela n’a pas pris plus d’un jour. »

Les résultats : un trafic propre et des clients heureux

Aujourd’hui, toutes les statistiques de trafic que Jooble envoie à ses clients sont exemptes de bots — et leurs clients peuvent voir la différence.

« Quelques semaines après avoir activé la protection, j’ai demandé des retours de certains clients clés, et ils m’ont dit qu’ils ne voyaient plus aucun bot », atteste Nazim. « Quelques mois plus tard, nous avons fait une enquête client. Ceux qui suivent les statistiques ont confirmé que la qualité du trafic s’était améliorée, et certains ont partagé des résultats très positifs en termes de taux de conversion et de coût par application. »

En automatisant sa protection contre les bots, l’équipe d’ingénieurs de Jooble s’est également libéré un temps significatif pour travailler sur des projets plus intéressants et générateurs de revenus.

« Nous n’avons pas suivi combien de temps nous avons passé à atténuer les bots avant de mettre en place DataDome. Mais j’estime que trois personnes passaient environ dix heures chacune chaque mois, donc c’est 30 heures de travail économisées », conclut Nazim.