Préchauffez le four à 350 °F (175 °C). Tapissez deux moules à muffins de 12 cavités avec des caissettes en papier.

Dans un grand bol, combinez le mélange à gâteau, l'eau, les œufs et l'huile; battez avec un mixeur électrique à faible vitesse jusqu'à ce que le tout soit humide, environ 30 secondes. Battez à vitesse moyenne jusqu'à obtenir une pâte lisse et crémeuse, environ 2 minutes. Remplissez les moules à muffins aux trois quarts avec la pâte.

Faites cuire au four préchauffé jusqu'à ce qu'un cure-dent inséré au centre ressorte propre, entre 18 et 20 minutes. Retirez du four et laissez refroidir les moules sur une grille pendant 15 minutes. Démoulez les cupcakes et laissez-les refroidir complètement sur une grille avant de les décorer.

Étalez une fine couche de glaçage à la vanille sur chaque cupcake. Pour de meilleurs résultats, placez les cupcakes au réfrigérateur pendant 30 minutes pour faciliter la décoration.