Aziz Yıldırım'ın ailesi, farklı bölgelerde doğmuştur: Aziz Yıldırım (başkan), 2 Kasım 1952 tarihinde Diyarbakır'ın Ergani ilçesinde doğmuştur. Babası Şefik Yıldırım, ilkokul öğretmeni olup, 1960 yılında Alanya'ya ve ardından Düzce'ye tayin edilmiştir. İlk eşi Yıldız Algün ile olan evliliği 2010 yılında sona ermiştir. İkinci eşi Gonca Çelikkıran ile olan evliliği 2011 yılında gerçekleşmiştir. Aziz Yıldırım'ın çocukları da farklı şehirlerde doğmuştur: Gülşah Gordi ve Hande Gamgam, ilk eşinden olup, Düzce'de doğmuştur. Yaz Yıldırım, ikinci eşinden olup, 2013 yılında doğmuştur.