Χτυπάμε τα αυγά με τη ζάχαρη να αφρατεψουν. Ριχνουμε σιγά σιγά το αλεύρι με το μπεικιν κοσκινισμενα, το αμύγδαλο και τη βανίλια και ανακατεύουμε με μια μαριζ απαλα. Βαζουμε το παντεσπάνι σε μια φόρμα 26εκ. διάμετρο που έχουμε βουτυρωσει και αλευρωσει καλα. Ψηνουμε στους 180°C για 30'-40'.

Για την κρέμα βάζουμε σε ένα κατσαρολακι όλα τα υλικά μαζί εκτός από το αμύγδαλο που το ρίχνουμε στο τέλος. Οταν βράσει η κρέμα και πήξει ρίχνουμε και το αμύγδαλο (όποιος θέλει μπορεί να ρίξει και μια κουταλιά βούτυρο μέσα, γυαλίζει και παίρνει μια ωραία γεύση από το βούτυρο). Αφήνουμε να κρυώσει σκεπασμένη με μεμβράνη για να μην κάνει κρούστα. Χτυπαμε και την σαντιγι.

Βράζουμε το σιρόπι για 3'. Οποιος επιθυμεί μπορεί να προσθέσει ένα σφηνάκι κονιάκ η μπράντυ.

Όταν τα έχουμε όλα έτοιμα κόβουμε το παντεσπάνι σε 3 δίσκους και σιροπιαζουμε. Αφρατευουμε την κρέμα στο μίξερ και προσθέτουμε τη μισή σαντιγι και την υπόλοιπη την κρατάμε για γαρνίρισμα. Συνθετουμε την τούρτα μας.