Dit fort werd gebouwd door de Portugezen in 1622 en werd door Koning Mayadunne van het Sitawaka koninkrijk veroverd op de Portugezen. De strijd werd geleid door zijn zoon Tikiri Rajjuru Bandara (later koning Rajasingha 1), die 13 jaar oud was. Later werd het heroverd door de Portugezen en ingeleverd bij de Nederlanders in 1655 zonder dat er een schot werd gelost. Het werd later uitgebreid door de Nederlanders met de toevoeging van twee bastions.
Diyambetalawa 'was de Singhalese naam van het eilandje gevonden in de buurt van de mond van de “Kalu Ganga”, in Kalutara. Dit eiland, dat nu is verbonden doormiddel van twee bruggen die de rivier overspannen, werd door de Nederlanders in of rond 1760 aan Peduru de Fonseka toestemming verleend, om dit te bouwen. Een deel van het eiland werd ingenomen om weg-en spoorbruggen te bouwen, en een deel word nu als parkeerplaats gebruikt voor voertuigen voor het grote aantal pelgrims dat de Kalutara tempel bezoekt.
Het eilandje, wordt elders gedocumenteerd onder de naam "Island in the Stream '. Hier kijken we naar enkele van de vroege illustraties gemaakt door Nederlandse kunstenaars van het Kalutara fort en de omgeving. Deze illustraties geven ons een blik in het verleden van Kalutara als een prachtige eiland.
De vroegste illustratie die we kunnen vinden van Kalutara is een gravure gedaan door Baldaeus en staat vermeld in de uitgave 'Beschrijving van het Eiland Ceylon'. Deze gravure gedaan in 1672 toont het fort tijdens de Portugese tijden. Het eilandje is te zien in het midden van de illustratie.