Pierwszy zamek w Drohiczynie wzniesiono w pierwszej połowie XI wieku. Była to konstrukcja drewniana. Na przełomie XII i XIII wieku zamek stał się własnością książąt mazowieckich, którzy rozbudowali gród. Wkrótce jednak ziemie dostały się pod władanie księcia ruskiego Daniela i to za jego panowania wzniesiono na górze pierwsze elementy murowane. Zamek został zniszczony w czasie potopu szwedzkiego i obecnie nic już po nim nie pozostało.