Προθερμαίνουμε τον φούρνο στους 180 βαθμούς.

Σε ένα μεγάλο μπόλ ρίχνουμε το λάδι με την ζάχαρη και ανακατεύουμε με το σύρμα.

Προσθέτουμε το γάλα, τη σόδα και τα μυρωδικά μας.

Προσθέτουμε λίγο-λίγο το αλεύρι ζυμώνοντας με τα χέρια, μέχρι να γίνει η ζύμη μας σφιχτή ώστε να μην κολλάει στα χέρια μας.

Μετά πλάθουμε τα κουλουράκια με τα δυό μας τα χεράκια σε διάφορα σχήματα και τα τοποθετούμε στο ταψί που είναι καλυμμένο με λαδόκολλα και τα ψήνουμε για 25 λεπτάκια...Αν θέλουμε τα τυλίγουμε μέσα στο σουσάμι.