Préchauffez le four à 175 °C. Graissez et farinez un moule à Bundt ou à tube de 25 cm.

Dans un batteur sur socle, crémez le beurre et le fromage Neufchâtel jusqu'à obtenir une texture crémeuse. Ajoutez les sucres brun et blanc et continuez à battre jusqu'à ce que le mélange soit léger et duveteux. Ajoutez les œufs un par un, en battant bien après chaque ajout. Incorporez la purée de patate douce jusqu'à homogénéité.

Dans un bol, combinez la farine à gâteau, la levure chimique, le bicarbonate de soude, la cannelle, la muscade, le gingembre et le sel. Ajoutez progressivement le mélange de farine au mélange de patate douce. Mélangez jusqu'à ce que tout soit bien incorporé. Ajoutez l'extrait de vanille. Versez la pâte dans le moule préparé.