S osmanským dobytím hrad stratil veľkú časť svojho strategického významu, hoci bol počas osmanskej vojny 1463-79 obsadený Benátčanmi a v roku 1620 napadnutý maltskými rytiermi. Počas obdobia benátskej nadvlády na Peloponésu (1687-1715) po
Moreanská vojna, slúžila ako sídlo fiškálneho okresu. Správy venecijských guvernérov v tom čase však Chlemoutsi odmietajú ako malú a sotva obývanú. V roku 1701 "provveditore generale" Francesco Grimani navrhol, aby bola zničená, pretože bola príliš ďaleko od mora - životne dôležitá pre námornú republiku - a ťažko sa bránila, a odporučil, aby sa Glarentza, ktorá bola vtedy opustená a zničená, namiesto toho znovu vybudovala. V roku 1715 sa Morea vrátila pod osmanskú kontrolu a začiatkom 19. storočia bola pevnosť úplne opustená. V roku 1825, počas gréckej vojny za nezávislosť, obsadil hrad egyptský Ibrahim Paša a rozbil časť jeho múrov, aby ho nemohli použiť grécki povstalci.