egendy podają, że zamek wznieśli tu pierwsi przedstawiciele rodu Świnków już w 900 roku. Bliższa prawdy wydaje się jednak hipoteza, że za czasów piastowskich w XI wieku wzniesiono tu zamek będący książęca kasztelania. Pierwszy raz zamek Zuini in Polonia wymienił kronikarz czeski Kosmas w 1125 roku. Z opisu tego kronikarza dowiadujemy się, że w 1108 roku Mutina ze swym stryjem odbyli w Zuini in Polonia potajemne spotkanie w celu omówienia planu obalenia czeskiego księcia Świętopełka.