Nazwą wąwozu Chałajowy Dół pochodzi od kazimierskiego rajcy (radny miasta) Mikołaja Chałaja, który w 1580 roku był sądzony za nieumyślne zabójstwo. Ławnikami w tej sprawie byli Jan Kochanowski oraz Mikołaj i Andrzej Firlejowie.
Wąwóz ma długość ok 500 m, z możliwością powrotu tą samą drogą.