তখন পশ্চিমে আজিমপুর, নিউমার্কেট ও ধানমন্ডি, দক্ষিণে বর্তমান সচিবালয় ভবন, কার্জন হল, চাঁনখার পুল ও পূর্বে পুরানা পল্টন, সেগুনবাগিচা, ও রাজারবাগ আর উত্তরে সেন্ট্রাল রোড, পরিবাগ ও ইস্কাটন পর্যন্ত এলাকাটি বিস্তৃত ছিল। ব্রিটিশ এবং পাকিস্তানি শাসনামলে ঢাকার চারটি থানার একটির নামকরণ করা হয়েছিল রমনা। বর্তমানেও ঢাকার ২০টি থানার একটি হচ্ছে রমনা।

রমনার ইতিহাস শুরু হয় ইংরেজি ১৬১০ খ্রিষ্টাব্দে যখন মুগল সম্রাট জাহাঙ্গীরের শাসনামলে সুবাহদার ইসলাম খান ঢাকা নগরী প্রতিষ্ঠা করেন। ঐ সময় ঢাকার উত্তর শহরতলিতে দুটি চমৎকার আবাসিক এলাকা গড়ে ওঠে। সুবাহদার ইসলাম খান চিশতির ভাইয়ের নামানুসারে এর একটির নামকরণ করা হয় মহল্লা চিশতিয়া এবং সুবাহদার ইসলাম খানের একজন সেনাধ্যক্ষ সুজা খানের নামানুসারে অপর এলাকাটির নামকরণ হয় মহল্লা সুজাতপুর। এই এলাকায় তখন উন্নত বসতবাড়ি ছাড়াও মসজিদ, বাগান, সমাধিসৌধ, মন্দির ইত্যাদি গড়ে ওঠে। মুগল সাম্রাজের পতনের পর রমনা ধীরে ধীরে তার পুরানো গৌরব হারিয়ে ফেলে। ইস্ট ইন্ডিয়া কোম্পানির আমলে সরকারি কাগজপত্রে রমনার নাম তেমন একটা চোখে পড়ে না। বস্তুত ঐ সময় রমনা ছিল একটি জঙ্গলাকীর্ণ পরিত্যক্ত এলাকা যেখানে ধ্বংসপ্রাপ্ত দালানকোঠা, মন্দির, সমাধি ইত্যাদি ছড়িয়ে ছিটিয়ে ছিল।

উদ্যানের বিভিন্ন স্থাপনা
পাকিস্তান আমল
প্রাথমিক ইতিহাস
ব্রিটিশ আমল