从前边的叙述我们可以看出，胤祥的前22年开局不错，在父皇的宠爱栽培下，再加上他个人的禀赋与努力，前程无可限量，但天有不测风云，一场没料到的灾祸，使他的人生发生了遽变。
皇家历来是风云变幻之地，尤其在皇位的争夺上表现的更加血腥惨烈，胜负难料，康熙朝也不例外，围绕着皇太子之位的争夺一刻也未停歇，为能坐上这个位置，众皇子暗地里结党营私，朝野文武大臣也多各附一党，呈现出了多派势力纵横捭阖，明争暗斗的复杂局面。当时势力最强的要数皇八子胤禩派，从者众多，呼声最高，锋芒外露，而皇四子胤禛（也就是后来的雍正皇帝）则韬光养晦，以“富贵闲人”自居，表面上不露声色，背地里却一刻也没有放弃对储位的觊觎与追逐，暗中都在积蓄着力量，并等待着出手的时机。皇八子胤禩有才干，人望好，再加上多年经营，皇子多投靠依附于他。相比之下，皇四子胤禛则显得势孤力单，连同袍兄弟胤禵都不站在他这一边，而是先依附于皇八子胤禩，待自视实力强大后，又自立门户争夺皇位，成为胞兄胤禛的死对头。在这种复杂的争斗局面下，十三子胤祥到底是怎么想的？参与了什么活动？其立场如何？史料都未给予明显记载，或说语焉不详，但不管是有意无意，不管是主动还是被动，他都卷入到了这场复杂激烈的党争漩涡中，并从此人生发生了巨大的转折，由早期的金色时光跌入到了黯然的泥沼！
康熙四十七年（1708年）九月，康熙帝以“不法祖德，不尊祖训，惟肆恶虐众，暴戾”等罪名，将皇太子胤礽废黜圈禁，并牵连众多皇子，胤祥亦在其中。萧奭《永宪录》记：“胤祥戊子九月以旧东宫事波及，亦削贝子，后再复。”雍正后来也说过：“怡亲王前因二阿哥之事无辜牵连，一时得罪皇考，随即鉴宥。”虽然，关于这件事的记载不够详实，但有两点可以肯定：1. 胤祥确实在废太子事件中受到了波及，并遭到了惩罚；2. 但后来又得到了皇帝的原谅。
