Už pred rokom 1287 sa v miestach súčasných zrúcanín vypínala gotická pevnosť dvoch veží – mocný hrad Zdislava z Lemberka, syna samotnej legendami opradenej liečiteľky svätej Zdislavy. Svoje sídlo založil Zdislav na tiahlej ostrožne nad riekou Jizerou na pradávnom zemskom chodníku vedúcom z Prahy do Severných Čiech.
Snáď práve výber mýta na strategickom mieste kupeckej cesty pri pojizerskom brode boli hlavným dôvodom umiestnenia stavby práve tu. Svoje meno potom získali Zvieratice zrejme podľa Zveraty, zakladateľa neďalekej obce, existujúcej už pred stavbou hradu.