Дозорная башня литовского князя Витовта повидала немало на своем веку, дата ее основание XIV столетие. Граница в то время проходила по правобережью Днепра и само собой существовали несколько таможенных пунктов, один из которых располагался на острове Тавань между Каховкой и Бериславом. Недалеко от этого места и находился наблюдательный пункт Витовта, который держал под контролем южную сторону острова.
В скором времени территории захватило Крымское ханство и в окрестностях были построены 3 крепости на месте современной Каховки, Берислава и острова Тавань, ныне затопленного Каховским водохранилищем. В 1695 году эти укрепления разрушили казаки Мазепы, но до дозорной башни не добрались, так как та находилась в стороне.
В 1880-ых годах башня была переоборудована под водонапорную князем Трубецким, предположительно в таком виде она просуществовала до 1950-х годов. В середине XX века, после того, как была построена Каховская ГЭС оборудование сняли, а строение забросили.
Какое-то время постройка вызывала множество вопросов: настолько ли она древняя, принадлежит ли к историческому наследию и в каком веке появилась. Лишь спустя определенный период из основания были собраны образцы строительного материала, доказывающие, что она относится к эпохе княжества Литовского.
