Kadıoğlu sülalesinin kökeni farklı bölgelerde farklı hikayelerle anlatılmaktadır: 1. Kastamonu Devrekani: Eski bir rivayete göre, zamanında Kastamonu kadısı oğullarından birini bugünkü Kadıoğlu mahallesi bölgesine yerleştirmiş ve köy bu şekilde adını almıştır. 2. Konya Sarayönü: Kadıoğlu kasabası halkı, Osmanlı Devleti zamanında bugünkü Yunak ilçesi Hatırlı (Kışla) köyüne yerleşmiş ve daha sonra savaşlar ve çeşitli sebeplerden dolayı Kadıoğlu'na göç etmiştir. 3. Aksaray: Aksaray'da bulunan Kadıoğlu (Bedriye) Medresesi'nin ilk olarak Anadolu Selçuklu Sultanı I. Gıyaseddin Keyhüsrev döneminde Aksaray Valisi Bedreddin Yusuf tarafından inşa ettirildiği düşünülmektedir.