Розташований в долині річки Діє (Тайя) за 18 км на південь від Брно і за 196 км на південний схід від Праги, на місці злиття річок Літава та Свратка, біля підніжжя високого пагорба (355 м).
Археологічні розкопки відносять виникнення Жидлоховиці до ранньослов'янських часів. Перша письмова згадка зустрічається в 1237 в документі Вацлава I. Поселення було побудовано на Янтарному шляху, що з'єднує Середземне море і узбережжя Балтійського моря. До 1918 входив до складу Австрійської імперії.