हालांकि, माधुरी से करीब या बढ़ने के चलते अजय की फैमिली उनसे काफी नाराज थी, क्योंकि अजय एक रॉयल फैमिली से ताल्लुक रखते थे। जबकि माधुरी एक नॉर्मल फैमिली से थी और उनका करियर उस समय शुरू ही हुआ था। ऐसे में दोनों के रिश्ते को लेकर उनके परिवार वाले बेहद नाखुश थे।