Πλήθος πιστών συρρέουν κάθε χρόνο στην Παναγία του Μικροκάστρου, κατά τον εορτασμό του Δεκαπενταύγουστου,για εκπληρώσουν το τάμα τους και να ζητήσουν την βοήθεια της Παναγίας. Το μοναστήρι του Μικρόκαστρου και ο εορτασμός του Δεκαπενταύγουστου είναι άρρηκτα δεμένο με το έθιμο των καβαλάρηδων.

Συγκεκριμένα, την ημέρα της Παναγίας, οι καβαλάρηδες, με τα στολισμένα άλογά τους, επισκέπτονται το Μοναστήρι της Παναγίας στο Μικρόκαστρο για προσκύνημα. Μετά το προσκύνημα, επιστρέφουν στη Σιάτιστα, όπου τους υποδέχεται ο κόσμος και συνεχίζεται το γλέντι με χάλκινα και χορούς.

Το έθιμο  έχει βαθιές ρίζες στην παράδοση της περιοχής και αναβιώνει κάθε χρόνο, με τους καβαλάρηδες να αποτελούν αναπόσπαστο κομμάτι των εορτασμών.