আলতাফ মাহমুদ বরিশাল জেলার মুলাদীতে এক সম্ভ্রান্ত পরিবারে জন্মগ্রহণ করেন। ১৯৩০ সালের ২০ ডিসেম্বর তার জন্ম মুলাদী থানার অন্তর্গত পাতারচর গ্রামে। সেই সময় গ্রামের বাড়ির পারিপার্শ্বিক অবস্থান ছিল এমন-পিতা নাজেম আলী হাওলাদারের নিজের ঘরটি ছিল টিনের দোতলা। ঘরের টিনগুলো লাল রং করা। ভিটে বেশ উঁচু ও পাকা। বাড়ির পাশে ছিল মসজিদ। পেছন বাড়িতে পুকুর।
পাশে লম্বা টিনের ঘর। এ ঘরের পাশ দিয়ে ফকির বাড়ির রাস্তা। উঠোনের অপর পাশেও একটা একতলা টিনের ঘর। ঘরগুলোর বেড়াও টিনের। উঠোনের মাঝখানে একটা কাঁঠাল গাছ। প্রায় পৌনে একশত বছর পূর্বে যে পরিবারের ঘরবাড়ি এমন সাজানো, পাকা এবং রং করা, সে পরিবার যে ধনাঢ্য ও সম্ভ্রান্ত তা বলার অপেক্ষা রাখে না। এমন পরিবেশেই আলতাফ মাহমুদের জন্ম। আলতাফ মাহমুদের দাদার নাম মাহমুদজান হাওলাদার।
