Kimonas Zografakis Kastelli Pediados faluban született és nevelkedett Krétán. Szülei Georgios (más néven "Xirouhis", görögül: "Ξηρούχης") és Ekaterini (született Katzagiannakis) Zografakis voltak, akiknek két lánya és hat fia volt. A görög-olasz háború alatt
(1940-41), Kimon Zografakis az albán fronton szolgált.