Mesurer l'impact de la validation de l'adresse à l'aide d'un test A/B

Ce document décrit les techniques à prendre en compte lorsque vous effectuez un test A/B des API Place Autocomplete et Address Validation de Google Maps Platform.

Voici quelques avantages de l'utilisation de Place Autocomplete et de l'API Address Validation:

• Amélioration de l'expérience client:en proposant à vos clients des suggestions d'adresses et de lieux en temps réel, vous pouvez les aider à finaliser leur paiement plus rapidement et plus facilement. Cela peut améliorer l'expérience client.
• Amélioration de la précision des données:la saisie semi-automatique des lieux et l'API Address Validation peuvent vous aider à améliorer la précision de vos données client. Cela peut être particulièrement important dans le commerce électronique, car des données d'adresse précises sont nécessaires pour la livraison des colis.

Pour améliorer la qualité de vos adresses, effectuez un test A/B afin d'évaluer la solution de validation qui répond le mieux à vos besoins. Vous pouvez ainsi choisir quantitativement le produit le mieux adapté à votre cas d'utilisation.

Un test A/B vous permet de comparer deux versions d'une page Web ou d'une application. Il s'agit d'un type de test contrôlé qui permet de déterminer l'impact d'une modification d'une variable sur un résultat mesurable.
Pour effectuer un test A/B, créez deux versions d'une page ou d'une application, l'une comme groupe de contrôle et l'autre avec la modification mesurable. Vous présentez ensuite ces versions à différents utilisateurs et mesurez leur interaction avec elles. La version la plus performante l'emporte.

Présentation de l'architecture du système

Examinons le test A/B de la validation d'adresse dans un cas d'utilisation d'e-commerce. Le schéma d'architecture ci-dessous montre comment un client interagirait avec votre expérience d'achat, ce qui vous permettra de déterminer la stratégie de validation la plus efficace.

[Contexte système] Tests A/B de la validation de l'adresse

Systèmes impliqués lors du test A/B de la valeur de l'API de validation d'adresses.

Processus de test A/B

Lorsque vous réfléchissez au processus de test A/B global, quatre étapes sont à prendre en compte.

• Préparation : identifiez les exigences, la portée et le calendrier des tests.
• Créer : implémentez l'API Place Autocomplete et l'API Address Validation dans un environnement pour exécuter le test.
• Exécuter : collectez des métriques pendant l'exécution du test, jusqu'à ce que vous obteniez des résultats significatifs ou que le délai soit écoulé.
• Analyser : comparez les résultats à l'hypothèse et identifiez les prochaines étapes.

Nous allons en parler à tour de rôle.

Prép

Déterminer les exigences concernant les tests A/B

Découverte initiale

Demandez-vous pourquoi vous ajoutez ou modifiez un fournisseur de validation d'adresses. Par exemple, avec Place Autocomplete de Google Maps:

• Gain de temps:vous n'avez pas besoin de saisir le nom complet d'un lieu. Il vous suffit de commencer à saisir des lettres pour que des suggestions s'affichent.
• Réduit les erreurs:si vous mal orthographiez le nom d'un lieu, la saisie semi-automatique des lieux Google Maps vous suggérera quand même le bon lieu.

La validation des adresses présente de nombreux avantages, dont les suivants:

• Amélioration des taux de distribution:la validation des adresses peut contribuer à améliorer les taux de distribution en veillant à ce que le courrier et les colis soient envoyés à la bonne adresse. Cela peut faire gagner du temps et de l'argent aux entreprises, et améliorer la satisfaction client.
• Amélioration de la qualité des données:la validation des adresses peut contribuer à améliorer la qualité des données en identifiant et en corrigeant les erreurs dans les adresses. Cela peut améliorer la précision des campagnes marketing et d'autres initiatives basées sur les données.

Choisir une hypothèse

Déterminez l'hypothèse que vous souhaitez tester. Voici deux exemples:

1. Taux de conversion

Lorsque vous ajoutez une solution de saisie semi-automatique, vous constatez généralement une légère augmentation des taux de conversion. Il s'agit d'une bonne métrique à suivre. Si vous changez de fournisseur pour votre solution de saisie semi-automatique, vous devez vous attendre à un taux de conversion fixe. Si le taux de conversion baisse, la première chose à vérifier est l'implémentation.

Le taux de conversion est important, mais il ne donne pas toujours une image complète. L'ajout d'une solution de validation des adresses vise à empêcher les utilisateurs de saisir des adresses de mauvaise qualité au moment de l'entrée. Dans certains cas, cela peut entraîner des frictions naturelles lors de la saisie des adresses. Cela peut entraîner une baisse des taux de conversion globaux, mais cela ne doit pas nécessairement être considéré comme négatif. Les commandes non finalisées en raison de l'ajout de la validation des adresses peuvent avoir été associées à des données d'adresse de mauvaise qualité qui auraient entraîné des frais pour l'entreprise en raison de rejets de débits de livraison.

2. Réduction du nombre d'adresses de mauvaise qualité

C'est là que la bonne solution de validation des adresses peut vraiment briller. En implémentant la validation des adresses, vous devriez constater une réduction des données d'adresse de mauvaise qualité.

Si vous comparez une nouvelle solution à une solution existante, il peut être tentant de ne comparer que les taux de correspondance des "bonnes adresses" et de sélectionner le service qui offre un taux de correspondance plus élevé. Cela peut être trompeur, car un service peut générer plus de faux positifs que l'autre.

La métrique la plus pertinente consiste à comparer le résultat positif de l'utilisation des données d'adresse. Prenons l'exemple de l'e-commerce. Le résultat souhaité de la saisie d'une adresse est la livraison réussie d'un colis.

Build

C'est maintenant que ça devient intéressant ! Il est temps de créer une nouvelle solution pour vos clients. Nous proposons déjà un guide pratique pour implémenter Place Autocomplete et l'API Address Validation sur une page de paiement d'e-commerce. Nous vous recommandons de le consulter pendant cette étape.

Même si vous ne créez pas spécifiquement pour l'e-commerce, de nombreuses informations restent pertinentes, en particulier les conseils pour déterminer la qualité des adresses à partir de la sortie de l'API Address Validation.

Schéma de l'architecture

Vous trouverez ci-dessous un exemple de conteneurs pouvant être utilisés pour créer un test A/B dans un environnement d'e-commerce:

[Environnement d'exécution] Test A/B de la validation des adresses

Les applications, services et magasins de données importants des systèmes clés qui alimentent l'architecture. (Cliquez sur le diagramme pour l'agrandir.)

Valider l'implémentation

Une solution mal implémentée produira des résultats de test peu fiables. Avant d'exécuter le test A/B, il est important de valider la solution auprès d'un petit groupe d'utilisateurs pour vous assurer qu'elle fonctionne comme prévu. Il peut s'agir de testeurs internes de contrôle qualité et/ou d'un groupe sélectionné de testeurs externes, en qui vous avez confiance pour fournir des commentaires constructifs.

Exécuter

Allez-y doucement

Même si la solution a été validée, il est toujours judicieux de déployer le test progressivement, en commençant par un petit groupe d'utilisateurs. Vous pourrez ainsi détecter rapidement les bugs et autres problèmes, et les résoudre sans affecter un grand pourcentage de vos utilisateurs.

Test complet

Une fois que la solution a été testée par un petit groupe d'utilisateurs et que les problèmes ont été résolus, nous pouvons passer à un test A/B complet. Il ne s'agit pas nécessairement d'une répartition exacte du trafic à 50/50, mais la taille doit être comparable à celle d'un ensemble d'utilisations en direct sélectionné au hasard.

Capturer les métriques

Pendant le test, vous devez vous assurer que les données appropriées pour étayer votre hypothèse sont collectées. Vous pouvez utiliser une plate-forme de test A/B au cours de ce processus pour faciliter la collecte des données et leur analyse ultérieure. Google Maps Platform collecte également des métriques d'utilisation des API qui peuvent vous être utiles. Pour en savoir plus sur l'utilisation de nos outils de reporting, consultez cette page.

Voici quelques suggestions de métriques:

Place Autocomplete

Taux de conversion:le taux de conversion/de finalisation de votre formulaire a-t-il augmenté depuis que vous avez ajouté une solution de saisie semi-automatique ?
Interaction avec l'outil:un plus grand nombre d'utilisateurs interagissent-ils avec Place Autocomplete par rapport à la solution précédente ?

Address Validation

Succès des livraisons:le nombre de livraisons échouées en raison de la qualité des adresses a-t-il diminué ?
Changements d'adresse:le nombre de frais de changement d'adresse que vous avez reçus de la part des coursiers a-t-il diminué ?
Résidentiel par rapport au commercial:la capture des données résidentielles par rapport aux données commerciales a-t-elle été améliorée ? (certains marchés uniquement)

Analyser

Maintenant que le test est terminé, il est temps d'analyser les résultats par rapport aux critères et à l'hypothèse de test d'origine. Si vous avez utilisé une plate-forme de test A/B pour effectuer le processus, certaines informations peuvent déjà être disponibles.

Pour revenir à la section Réduction du nombre d'adresses de mauvaise qualité ci-dessus, vous pouvez également utiliser d'autres métriques qui n'ont peut-être pas été capturées par la plate-forme de test A/B. Il peut s'agir du taux d'échec des envois entre les scénarios de test, avec des données d'exemple comme celles-ci:

En examinant l'exemple de base ci-dessus, il est clair que pour ce cas d'utilisation, la solution B est la meilleure option.

Conclusion

Nous espérons que ce guide vous a fourni suffisamment d'informations pour vous lancer dans les tests A/B. Bien que des exemples de l'e-commerce aient été utilisés, les mêmes principes de base peuvent être appliqués à tous les secteurs. Identifiez le résultat positif que vous obtiendrez en disposant de données d'adresse de bonne qualité dans votre entreprise, et suivez-le comme hypothèse principale.

Vous trouverez ci-dessous les liens mentionnés dans le guide, comme suggéré pour d'autres lectures.

Bon test !

Étapes suivantes

Téléchargez le livre blanc Améliorer les processus de paiement, de livraison et d'exploitation avec des adresses fiables et regardez le webinaire Améliorer les processus de paiement, de livraison et d'exploitation avec la validation des adresses .

Lectures complémentaires suggérées:

• Validation des adresses pour le règlement dans l'e-commerce
• Documentation Place Autocomplete
• Documentation de l'API Address Validation
• Rapports Google Maps Platform

Contributeurs

Auteurs principaux:

Henrik Valve | Ingénieur de solutions Google Maps Platform