La colline fortifiée de Birštonas (le mont de Vytautas) est l’un des collines fortifiées les mieux connues et les plus hautes en Lituanie. Le château de bois qui y était érigé protégeait le Duché de Trakai contre les attaques de l’Ordre Teutonique. Pour la première fois, ce château a été mentionné par les chroniqueurs en 1382. Mais son histoire dure depuis les temps beaucoup plus anciens. Les découvertes archéologiques effectuées au pied de ce mont ont permis de constater que le premier site habitable y était aménagé depuis le milieu du 1er millénaire et s’y trouvait jusqu’au début du XVe siècle.