इसके बाद उनकी शादी हो गई और वे भारत वापस लौट आए। उनकी पत्नी भी एमबीबीएस और एमडी क्वालिफाइड डॉक्टर हैं। इसके बाद फिर से 2004 में उन्हें रिसर्च फेलोशिप मिली और वे अपनी पत्नी के साथ ऑस्ट्रेलिया चले गए। एकतरफ जहां डॉ पांडेय कॉन्ट्रैक्ट्स के क्षेत्र में काम कर रहे थे वहीं उनकी पत्नी ऑक्युलर प्लास्टिक सर्जरी पर काम कर रही थीं। 2005 में वे वापस भारत लौटे और थोड़े दिन हैदराबाद के एलवी प्रसाद आई इंस्टीट्यूट में काम करने के बाद खुद का अस्पताल खोलने के बारे में सोचा। यहां रेत की वजह से लोगों की आंखों में काफी दिक्कतें और कई तरह के रोग होते थे।