Looking for a simple guide to push notification A/B testing?
A/B testing can help you figure out exactly what your audience responds to the most. But how do you do it with push notifications? Most push notification software comes with A/B testing tools.
But…
- What do you test?
- What results are good results?
- Can you do it with without APIs and coding?
In short: What should you know before you jump into push notification A/B testing?
We’re going to answer all these questions and more in this article. So, let’s dive in.
What is Push Notification A/B Testing?
Push notification A/B testing is a method of optimizing your conversions from push notification campaigns. You can choose to optimize different parts of your push notifications based on what kind of results you want to improve.
The idea behind A/B testing (or split testing) push notifications is super simple.
You send out one version of your notification (version A) to 50% of your audience and another version with small changes (version B) to the rest of your audience. And you get to see which push notification works better for your audience.
If you’re smart, you can even limit your A/B testing to a small segment of your audience to get better campaign performance. This is called Intelligent A/B Testing.
Dans les tests A/B intelligents, vous effectuez le test sur une partie de votre audience totale. Nous recommandons d'effectuer un test A/B intelligent sur 30 % de votre audience. De cette façon, vous envoyez la version A à 15 % de votre audience, et la version B à un autre 15 %. La notification push qui obtient les meilleurs résultats est automatiquement envoyée au reste de votre audience.
Ainsi, dans les tests A/B intelligents, vous pouvez envoyer la notification push gagnante à 85 % de votre audience au lieu de l'envoyer à 50 %. Cela améliore instantanément les performances globales de votre campagne et sa configuration est très simple.
What Can You Split Test in Push Notifications?
Il est temps de répondre à la grande question avec les tests A/B de notifications push. Que pouvez-vous tester en A/B dans une notification push ?
Les métriques de performance les plus courantes pour les notifications push sont :
- Click rate: The click rate on a push notification is how often your subscribers saw your push notification and then clicked on it.
- View rate: The view rate of a push notification is how often a subscriber received your push notification and saw it before it expired.
- Goal conversions: You can set goals for your campaign and set up goal tracking for your campaigns. The goal conversions is a measure of how many times you achieved your goal.
To increase your view rates, you want to use a large image in your push notifications. Using images in your notifications instantly makes it more appealing.
Vous pouvez également expérimenter avec des mots percutants dans le titre de votre notification push.
Ainsi, vous pouvez tester en A/B des notifications avec et sans images. Vous pouvez également tester les taux de visualisation en testant A/B des notifications push avec et sans mots percutants dans le titre.
Si vous cherchez à améliorer votre taux de clic, vous devez vous concentrer sur le message principal et travailler à le rendre très pertinent. Principalement, cela concerne l'une des deux choses suivantes :
- La segmentation de vos abonnés
- Ne pas envoyer trop de notifications push
Et il n'y a rien à tester en A/B dans ce domaine. Mais vous pouvez tester en A/B vos taux de clic avec les boutons d'appel à l'action (CTA) de vos notifications push. Essayez de tester en A/B des notifications push avec un ou aucun CTA par rapport à une notification avec deux CTA.
Si vous n'êtes pas sûr de la manière de créer plusieurs CTA, consultez cet article sur la façon d'ajouter des boutons à vos notifications push.
With goal conversions, it’s mostly a matter of setting up relevant eCommerce push notifications. So, again, there’s not a LOT to split test here. That said, if you can optimize your push notifications for better clicks to a really good offer, your goal conversions will increase. You can get more conversion-focused clicks by testing your push notification copy.
How to Get Started with Push Notification A/B Testing
Now that we know what push notification A/B testing is and what you should be testing, let’s give you a look at how to get started quickly.
Étape n°1 : Sélectionner un service de notification push
We recommend using PushEngage to send your push notifications.
PushEngage est le logiciel de notifications push n°1 au monde.
Les notifications push vous aident à augmenter le trafic de votre site web et l'engagement en mode automatique. Et si vous gérez une boutique en ligne, PushEngage vous aide également à augmenter vos ventes en vous aidant à créer des notifications push e-commerce automatisées.
Vous pouvez commencer gratuitement, mais si vous êtes sérieux au sujet de la croissance de votre entreprise, vous devriez acheter un plan payant. De plus, avant d'acheter un service de notification push, vous devriez consulter ce guide sur les coûts des notifications push.
Voici un aperçu rapide de ce que vous obtenez avec PushEngage :
- Campagnes automatisées à forte conversion
- Options multiples de ciblage et de planification de campagnes
- Suivi des objectifs et analyses avancées
- Tests A/B intelligents
- Un responsable du succès dédié
You’ll see that PushEngage is hands down the best bet if you want to build traffic, engagement, and sales for your business. Check out this comparison of the best push notification services if you have any doubts. And if you’re on a budget, you can always get a little bit creative with your push notifications.
Step #2: Create a Push Notification
Accédez à votre tableau de bord PushEngage et allez dans Campaign » Push Broadcasts, puis cliquez sur le bouton Create a New Push Broadcast :
Sous l'onglet Content, ajoutez le contenu de votre notification push :
Step #3: Add an A/B Test
Cliquez sur le lien Ajouter un test A/B pour créer instantanément un test A/B pour votre notification push :
Et ensuite, vous pouvez simplement créer deux versions de votre notification push :
Et vous pouvez modifier tout ce que vous voulez dans votre version B. Si vous faites défiler vers le bas, vous pouvez même tester en A/B les boutons d’action de votre notification push. Une fois que vous avez terminé de configurer le contenu des deux versions, cliquez sur le bouton Enregistrer et sélectionner les segments.
Vous pouvez sélectionner une audience personnalisée ici :
Ou, vous pouvez l’envoyer à tous vos abonnés aux notifications push. Lorsque vous avez terminé, cliquez sur le bouton Envoyer/Planifier.
Step #4: Create an Intelligent A/B Test
Ici, vous pouvez activer les tests A/B intelligents :
Activez le test A/B intelligent et définissez la taille de l'échantillon pour le test.
And just schedule or send your push notification. You’re done!
A/B Testing Best Practices
Let’s take a quick look at some of the best practices for A/B testing so that you can make the most of your experiments.
- Test the Right Items: Before you create a split test, be sure of what you want to optimize. Don’t try to optimize 5 different metrics at the same time or you’ll just end up ruining the experiment with too many variables.
- Pay Attention to Sample Size: The sample size you use for your split test can change a lot. You don’t want to run tests on 5% of your total audience because the results will be statistically insignificant. And you don’t want the test audience to be so large that your overall performance tanks either. Intelligent A/B testing is perfect for this balance.
- Make Sure Your Data Is Reliable: Sometimes, you’ll see great results on your A/B tests. But we recommend using a statistical significance calculator to know if your data is actually reliable.
- Schedule Your Tests Correctly: If you schedule an A/B test during Black Friday, and expect the results to be comparable with any odd Wednesday, you’re going to get very misleading information.
- Test One Element at a Time: If you test too many elements of a push notification at the same time, you won’t know what’s creating the difference.
Use these simple practices to create a process around your A/B testing. Of course, we recommend using push notification best practices first and then improving your performance with push notification A/B testing afterwards.
What to do After You Learn Push Notification A/B Testing
C'est tout pour cette fois, les amis !
By now, you’ve already started push notification A/B testing.
Now, all that’s left is generating traffic to your site so that can get push notification subscribers to run A/B tests. Sending push notifications is a great way to generate repeat traffic for your site. If that’s something you’re interested in, you should check out these articles as well:
- Coût des notifications push : Est-ce vraiment gratuit ? (Analyse des prix)
- Comment obtenir plus de trafic vers votre blog WordPress (9 méthodes faciles)
- Comment augmenter votre taux d'opt-in pour les notifications push Web (7 méthodes)
Nous vous recommandons d'utiliser PushEngage pour envoyer vos notifications push. PushEngage est le logiciel de notification push n°1 au monde. Donc, si ce n'est pas déjà fait, commencez dès aujourd'hui avec PushEngage.
