胤祥出身高贵，是纯正的龙子龙孙，金枝玉叶。其父是康熙帝，生他那年，康熙32岁，正值豪气冲天之年；其母名章佳氏，乃参领（正三品武官）海宽之女。康熙诸子出身，只有二阿哥允礽最高贵，其母是孝诚皇后，也因此他被立为太子，其余的都是庶出，以母家的门第而论，大阿哥允褆母恵妃，是郎中索尔和女；三阿哥允祉母荣妃，是员外郎盖山女；四阿哥雍正母德妃乌雅氏，是原任护军参领威武女；五阿哥允祺母宜妃，是佐领三官保女；七阿哥允祐母成妃，是司库卓奇女；八阿哥允禩母良妃，是内管领阿布鼐女；九阿哥允禟与五阿哥同母；十阿哥允衣我母温僖贵妃，是原任辅政大臣遏必隆女。胤祥母章佳氏地位虽然不算高，但架不住康熙帝对其十分宠爱，这从两点上可以看出来，一是她在康熙二十五年（1686年）生了胤祥，康熙二十六年（1687年）就生了“十三女和硕温恪公主”，康熙三十年（1691年）又生了“十五女和硕敦恪公主”，六年间生了三个孩子，而且前两个是连着生的，即康熙二十六年生胤祥，二十七年就生十三公主，说明在允祥刚生下来，康熙帝就与其同房了，可见其对她的格外宠爱。二是其病逝时，当时三阿哥允祉在百日内违反丧仪剃发（按丧制，皇子在母妃去世百日内不得剃发），结果遭到康熙帝的严惩，从郡王降为贝勒，此举亦可见她在康熙帝心目中的地位。章佳氏生前没有得到正式封号，直到康熙三十八年（1699年）薨逝，才因“性行温良，克娴内则，久侍宫闱，敬慎素着”追谥为敏妃。雍正即位后，又追封她为“皇考皇贵妃”。由于康熙帝对胤祥母亲的钟爱，自然而然的也扩展到胤祥身上，使他从一出生就得到了不一般的待遇，当然，这里面也有胤祥自身讨父皇喜欢的原因。