Σε ένα κατσαρολάκι ρίχνουμε το γάλα με την μισή ζάχαρη και περιμένουμε μέχρι να ξεκινήσει να βράζει.

Όσο περιμένουμε σε ένα μπολ ρίχνουμε την υπόλοιπη ζάχαρη, τους κρόκους και το αλεύρι και με την βοήθεια του αυγοδάρτη ανακατεύουμε καλά.

Όταν το γάλα μας ξεκινήσει να βράζει ρίχνουμε λίγο λίγο μέσα στο μπολ με τους κρόκους μέχρι να ανέβει η θερμοκρασία, τότε ρίχνουμε ξανά το μείγμα από το μπολ στην κατσαρόλα και ανακατεύουμε μέχρι να πήξει.

Όταν είναι έτοιμο ρίχνουμε την βανίλια και το βούτυρο και ανακατεύουμε.

Το ρίχνουμε σε ένα μπολ και το βάζουμε ψυγείο με φύλλο ζελατίνας από πάνω για να μην κάνει πέτσα από πάνω.

Σε ένα αντικολλητικό τηγάνι ρίχνουμε τα καρύδια με την ζάχαρη και το αλάτι και με μια ξύλινη κουτάλα ανακατεύουμε μέχρι να λιώσει η ζάχαρη.

Βάζουμε τα καρύδια πάνω σε μια λαδόκολλα και τα αφήνουμε να κρυώσουν.

Τέλος ρίχνουμε τα σμέουρα και τα καραμελωμένα καρύδια μέσα στην κρέμα και τα ανακατεύουμε.

Αφήνουμε λίγα για να τα διακοσμήσουμε από πάνω και ξαναβάζουμε στο ψυγείο μέχρι να κρυώσει καλά.