মধ্যযুগে সোনারগাঁ বাংলার রাজধানী হওয়ার পর থেকে পানাম নগর ব্যাপক উৎকর্ষ লাভ করে। কিন্তু বৃটিশরা বাংলার নিয়ন্ত্রণ নেয়ার পর থেকে এখানকার সম্ভ্রান্ত মুসলিমরা ব্রিটিশদের সঙ্গে অসহযোগীতা করায় বৃটিশরা এখানকার বাসিন্দাদের প্রভাব প্রতিপত্তি কমানোর উদ্যোগ নেয়। একই সঙ্গে তারা এখানে উচ্চ বর্ণের হিন্দুদের (শুধুমাত্র যারা ব্রিটিশদের সঙ্গে সহায়তা করে) পুনবার্সণ শুরু করে। ফলে এখানে ক্রমে হিন্দু ব্যবসায়ীদের অবস্থান তৈরি হয়। একই সঙ্গে অতীতে বসবাসকারী অনেক ব্যবসায়ী যারা ব্রিটিশদের সঙ্গে সহায়তা করেনি তারা ক্রমে এ এলাকা ছেড়ে চলে যেতে বাধ্য হয়। ফলে পানাম নগরের বিস্তির্ণ এলাকা ক্ষতিগ্রস্থ হয়। ভেঙে ফেলা হয় অনেক বাড়িঘর। এভাবে পানাম নগরের বিস্তির্ণ এলাকা ধ্বংস হয়ে যায়। বর্তমানে পানাম নগরে রাস্তার দুইধারে পুরানো যেসব ভবন দেখা যায় তা মূলত ব্রিটিশদের সহায়তায় গড়ে উঠা উনবিংশ এবং বিংশ শতাব্দির হিন্দু উচ্চ বর্ণের ব্যবসায়ীদের তৈরি। ব্রিটিশরা চলে যাওয়ার পর এসব ব্যবসায়ীদের প্রতিপত্তিও হ্রাস পায়। ফলে ভবনগুলো ক্রমে পরিত্যক্ত হতে থাকে। ফলে আস্তে আস্তে তা আশপাশের লোক দ্বারা দখল হতে থাকে। ২০০৯ সালে স্থানীয় প্রশাসনের উদ্যোগে পানাম নগরীকে সম্পূর্ণভাবে দখলমুক্ত করা হয়। 

বাংলাদেশ স্বাধীন হবার (১৯৭১ খ্রিষ্টাব্দের) আগে ও পরে বাড়িগুলো ১০-১৫ বছরের ইজারা দেয়া হয় এবং পরে নবায়নও করা হয়। মূল বাসিন্দাদের অবর্তমানে বাড়িগুলো অযত্নে ক্ষয়ে যেতে থাকে। ফলে বর্তমানে (২০০৪) আর ইজারা নবায়ন করা হয় না।

পানাম নগরের মূল প্রবেশ পথের ছোট্ট খালটির উপরে একটি সেতু ছিলো, যার কোনো অস্তিত্ব আর অবশিষ্ট নেই। অযত্ন আর অবহেলায় পানাম নগরের বাড়িঘরগুলোতে শ্যাওলা ধরেছে, ভেতরের পরিবেশটা স্যাঁতস্যাঁতে, গুমোট। বাড়িগুলোর দেয়ালে গজাচ্ছে গাছপালা, অনেক বাড়ির ভিতরে ঢুকে গেছে গাছের শিকড়। অনেক ঘরের চৌকাঠ ও রেলিং খুলে পড়েছে। চুরি হচ্ছে কড়িকাঠ ও তক্তা। ফলে বিভিন্ন সময় বাড়িগুলোর ছাদ ধ্বসে পড়ছে, ভেঙ্গে পড়ছে সিঁড়ি ও দেয়াল। পরিত্যক্ত এসব বাড়িগুলোর অনেকগুলোতে মানুষ কিংবা পশু-পাখি মলমূত্র ত্যাগ করে থাকে। অনেক বাড়িরই সিরামিক টাইল্‌সে ভাঙ্গন ধরেছে, খিলানে ধরেছে মরিচা। কোনো কোনো বাড়ির কার্ণিশে গজিয়েছে আগাছা। এমনকি ২০০৫ খ্রিষ্টাব্দে দুটো বাড়ি সম্পূর্ণ ধ্বসে পড়ে।

এখনও (২০০৪) অন্তর্বাটি-বহির্বাটি উভয়ই টিকে আছে এরকম ৪০টি বাড়ি রয়েছে পানামে। একটি বাড়িতে বিশাল নাচঘর পর্যন্ত টিকে আছে, যার চারদিকে একতলা ও দোতলায় দর্শকের বসার ব্যবস্থা আছে। এখন সেই নাচঘরে বসে জুয়াড়ি আর নেশাখোরদের আড্ডা।

অবস্থান
পানাম-দুলালপুর পুল
অবক্ষয়
বিবরণ