بسم اللہ الرحمن الرحیم

الجواب و باللہ التوفیق

You can perform Hajj despite your current financial responsibility. Don't wait until the loan is paid off.

وَمِنْهَا ای من شرائط وجوب الحج الْقُدْرَةُ عَلَى الزَّادِ وَالرَّاحِلَةِ وَتَفْسِيرُ مِلْكِ الزَّادِ وَالرَّاحِلَةِ أَنْ يَكُونَ لَهُ مَالٌ فَاضِلٌ عَنْ حَاجَتِهِ، وَهُوَ مَا سِوَى مَسْكَنِهِ وَلِبْسِهِ وَخَدَمِهِ، وَأَثَاثِ بَيْتِهِ قَدْرَ مَا يُبَلِّغُهُ إلَى مَكَّةَ ذَاهِبًا وَجَائِيًا رَاكِبًا لَا مَاشِيًا وَسِوَى مَا يَقْضِي بِهِ دُيُونَهُ وَيَمْسِكُ لِنَفَقَةِ عِيَالِهِ، وَمَرَمَّةِ مَسْكَنِهِ    وَنَحْوِهِ إلَى وَقْتِ انْصِرَافِهِ كَذَا فِي مُحِيطِ السَّرَخْسِيِّ

 (۱/۲۱۷)الْفَقِيرُ إذَا حَجَّ مَاشِيًا ثُمَّ أَيْسَرَ لَا حَجَّ عَلَيْهِ هَكَذَا فِي فَتَاوَى قَاضِي خَانْ۔ فتاوی عالمگیریہ  

فقط واللہ اعلم بالصواب