Kościół, należący niegdyś do opactwa norbertanów, został ufundowany przez biskupa płockiego Wita z Chotla w 1179; od jego imienia pochodzi nazwa "Witów". W 1241 na klasztor napadli Tatarzy, mordując wszystkich zakonników i zakonnice. Według legendy trzy zdołały uciec do pobliskiego lasu i dzięki temu przeżyły. W czasie gdy w pobliskim Piotrkowie Trybunalskim odbywały się zjazdy sejmów walnych, w witowskim klasztorze przebywali królowie polscy.