চরম দারিদ্র্য ও দুঃখকষ্টের মাঝে জন্ম হওয়ায় পরিবারের লোকজন শিশুটির নাম রেখেছিলেন 'দুখু মিয়া'। মাত্র আট বছর বয়সে তাঁর বাবা মারা যান। তিনি গ্রামের মক্তবে পড়াশোনা করতেন, কিন্তু বাবার মৃত্যুর পর সংসারের জন্য তাঁকে নানা কাজ করতে হয়।