amek w Kazimierzu został wzniesiony, jak podaje Jan Długosz, w latach 40-ych XIV stulecia z inicjatywy króla Kazimierza Wielkiego. Usytuowano go na wzniesieniu nieopodal istniejącej wcześniej samotnej wieży, zbudowanej przypuszczalnie za panowania Władysława Łokietka. Obydwie budowle służyć miały przede wszystkim ochronie miasta i pobliskiej przeprawy na Wiśle przed najazdami hord tatarskich, ale funkcjonowała w nich również komora celna, a także punkt kontroli ruchu statków na rzece