Ogród Różańcowy powstał w przy kościele w Ludźmierzu dokładnie w miejscu zgromadzenia pielgrzymów w dniu 7 VI 1997 r. Ogród wraz z pomnikiem Jana Pawła II ma być widocznym upamiętnienien wizyty Papieża w Sanktuarium MB Ludźmierskiej.
Tuż po spotkaniu z Ojcem Świętym rozpoczęto przygotowania do budowy ogrodu. Pierwotnie powstało 15 stacji, tyle ile było tajemnic w różańcu aż do 2003 r. Po dodaniu przez Jana Pawła II do różańca tajemnic Światła, w ogrodzie dobudowano 5 kolejnych stacji, które zmieniły regularny układ kompozycji ogrodu. Jednak ogród przez to zyskał na większej rożnorodności..