Préchauffer le four à 160°C (ou 170°C si votre four est un peu faible).
Faire torréfier les épices (gingembre, cannelle, quatre-épices) à feu moyen dans une poêle en surveillant bien pour ne pas les brûler.
Déglacer les épices torréfiées avec le lait, puis ajouter le miel et le beurre. Laisser fondre le beurre et bien mélanger.
Dans un grand bol, mélanger la farine, la levure chimique et la cassonade.
Verser le mélange lait-épices-miel-beurre dans le mélange de farine. Mélanger en partant du centre pour éviter les grumeaux jusqu'à obtenir un appareil homogène, légèrement élastique et compact.
Chemiser un moule à cake en le badigeonnant de beurre pommade au pinceau sur toutes les parois, puis fariner le moule et tapoter pour enlever l'excédent.
Verser l'appareil dans le moule préparé en récupérant tout avec une maryse.
Enfourner et cuire environ 40 minutes. Vérifier la cuisson, puis démouler le pain d'épices sur une grille et laisser refroidir.
Préparer le glaçage royal : verser le sucre glace dans un bol, ajouter le blanc d'œuf cassé en petite quantité progressivement tout en mélangeant à la spatule jusqu'à obtenir une consistance nappante. Ajouter quelques gouttes de jus de citron et bien mélanger.
Napper le pain d'épices refroidi avec le glaçage royal, puis décorer avec du sucre cassant et des zestes de citron et d'orange. Laisser figer le glaçage avant de déguster.