Tha tobhtaichean Chaisteil Maoil air creagan os cionn Loch Aillse, a' coimhead thar Chaol Àcain. Thathar a' creidsinn gun deach an caisteal a thogail sa 15mh linn mar dhachaigh do Chlann MhicFhionghain, ach a rèir aithris, chaidh a thogail san 10mh linn le bana-phrionnsa Lochlannach, air an robh 'Saucy Mary', a bha pòsta aig ceannard Chlann MhicFhionghain. Tha e coltach gun do chuir i cìs air soithichean a' dol tron chaolas le bhith a' sìneadh slabhraidh o thaobh gu taobh a' chaolais. Gu tuath air an loch sa Chaolas a-staigh, tha Eilean Bàn, Na h-Eileanan Cròbhlainn agus, sa chùlaibh, Eilean Ratharsaigh