Σε ένα μπολ, ανακατεύουμε το αλεύρι, το μπέικιν πάουντερ την κανέλα και το γαρύφαλλο.

Βάζουμε στο μπολ του μίξερ, την ζάχαρη και τα αυγά να χτυπηθούν, στην δυνατή ταχύτητα για 15’ περίπου λεπτά, έως ότου πήξει το μίγμα και πάρει το χρώμα του λεμονιού. Ρίχνουμε και ανακατεύουμε με ένα κουτάλι, λίγο-λίγο το μείγμα με το αλεύρι. Έπειτα ρίχνουμε και ανακατεύουμε απαλά τα καρύδια, προσέχοντας να μην ξεφουσκώσουν τα αυγά. Βουτυρώνουμε καλά ένα ταψί Νο 30 και ρίχνουμε το μείγμα. Το βάζουμε στον φούρνο, στους 175º για 30’ λεπτά. Τα βγάζουμε από τον φούρνο και το αφήνουμε να κρυώσει.

Βάζουμε σε ένα κατσαρολάκι την ζάχαρη και το νερό και το βράζουμε για 5’ λεπτά. Το βγάζουμε από την φωτιά και ρίχνουμε το κονιάκ. Έπειτα, ραντίζουμε με το καυτό σιρόπι, το κρύο παντεσπάνι.

Σε μία βαθιά κατσαρόλα, ρίχνουμε την ζάχαρη, το αλεύρι, λίγο αλάτι, ανακατεύουμε και ρίχνουμε σιγά-σιγά το ζεστό γάλα. Μετά ρίχνουμε τους κρόκους αυγού, ελαφρά χτυπημένους. Βράζουμε την κρέμα σε χαμηλή φωτιά, έως ότου πήξει. Μόλις κατεβάσουμε την κρέμα από την φωτιά, ρίχνουμε τις βανίλιες και αφήνουμε την κρέμα να κρυώσει, ανακατεύοντας από καιρό σε καιρό, για να μην πιάσει κρούστα. Ρίχνουμε την σαντιγί και ανακατεύουμε ελαφρά την κρύα κρέμα. Έπειτα, ρίχνουμε το μείγμα πάνω στο κρύο και σιροπιασμένο παντεσπάνι. Πασπαλίζουμε με την κανέλα και χοντροκοπανισμένα καρύδια. Βάζουμε την σπάτουλα στο ψυγείο για αρκετές ώρες, μέχρι να κρυώσει και να σφίξει η κρέμα του.