Pernštejnin aatelissuku muutti alkuperäisen keskiaikaisen linnan 1500-luvun lopulla renessanssipalatsiksi. Palatsi on harvinainen esimerkki tšekkiläiseen ympäristöön sopeutetusta italialaisesta arkadirakennuksesta, keskieurooppalaisesta renessanssiajan aatelisasunnosta sekä uusien tyylisuuntien vaikutuksesta palatsiarkkitehtuurin kehitykseen. Litomyšlin kaupunki on myös suuren tšekkiläisen säveltäjän Bedřich Smetanan synnyinpaikka ja hänen mukaansa on nimetty perinteikäs musiikkifestivaali (Smetanan Litomyšl).
Kaupunki ja palatsi sijaitsevat n. 50 km koilliseen Hradec Královésta Svitavan ja Brnon välisen tien varrella.
