8月23日，朝鮮發表措詞強硬的聲明，稱由於美對朝採取敵對政策，六方會談工作組會議已無法舉行，“朝鮮不可能再參加會談，更不可能與美國一起坐在談判桌前”。朝鮮外務省發言人措詞嚴厲地斥責布什是“殘暴的政治低能兒”。對此，美國國務院代理發言人亞當·埃雷利稱，朝對布什的人身攻擊顯然是不恰當的，但他表示，朝鮮以及其他五個國家在上次會談的最後一輪曾同意今年9月底之前再次全體出席六方會談。他說：“這個協議依然有效，我們仍然在和中國以及其他國家合作，試圖制定計劃，包括在全體出席之前召開工作組會議。”仍堅信朝將參加六方會談。”

　　表面看來，朝鮮宣布退出六方會談是由於美國總統布什近日在競選演講中醜化金正日，但根本原因是在第三輪六方會談後，朝鮮對外部環境的認識發生了變化。

　　首先，美在六方會談後的言行告訴朝：美對朝政策的強硬內核沒有任何改變。在第三輪六方會談期間，美態度較前明顯靈活，如不再使用CVID的提法、首次提出了解決朝核問題的具體方案、不再反對日韓對朝提供援助和補償。但最近美的言行使朝極為失望：一是美副國務卿博爾頓對外界表示，美態度靈活“是為了在11月大選前告訴選民，美政府正在為通過談判解決朝核問題而竭盡全力”。二是繼續阻撓朝韓交流和經濟合作。三是繼續對朝進行軍事威脅。

　　其次，朝韓關係反而出現一些不愉快。盧武鉉重新上台後，朝加大對韓工作力度。金正日力推南北軍事互信，停止敵對宣傳，但韓軍方對北方敵意不減。8月23日，美韓再次舉行大規模軍事演習測試能否對朝鮮方面可能的攻擊作出迅速反應。更令朝不滿的是，韓不久前動用專機從某東南亞國家接走了數百名“脫北者”。對此，朝威脅要採取報復行動。

　　最後，日朝關係在人質返日後並未出現突破。在5名日人質及其家屬返日後，日又提出了新的失蹤人員名單，使新一輪日朝建交談判無果而終。更讓朝無法容忍的是，今年10月將在日本海面舉行防擴散安全倡議第二次聯合演習，這無異於到朝家門口挑釁。

　　分析人士認為，促使朝下決心轉變政策的導火索是美外交政策全國委員會主辦的東北亞安全非正式會議。會議於8月11日至13日在紐約召開，目的是為朝核問題解決尋求方案。但就是在這種非正式場合，美也堅拒與朝單獨舉行雙邊會談，這使朝認識到：美繼續維持六方談判的目的只是為了防止朝鮮半島局勢在大選前失控。因此，朝8月16日打破沉默，稱“由於美國破壞了舉行會談的基礎，朝鮮無法參加六方會談新一輪工作組會議”。與此同時，朝要求美表明參與對朝補償的意願，為會談創造基礎。朝的意圖是對美展開正面強攻，利用布什政府希望半島局勢保持穩定的心理，以強硬政策迫美在大選前作出讓步。

　　朝實際上並不願完全放棄六方會談框架，但美日等方在朝16日聲明後的反應使朝再下猛藥，直接宣布不參加六方會談。一是美對朝退出工作組會談採取了掩耳盜鈴的態度，堅稱美正與有關國家就舉行新一輪工作組會議進行磋商，不久將會取得進展。二是美韓執意於8月23日舉行聯合軍演，朝選在這一天宣布決定絕非偶然。三是澳大利亞外長唐納親赴朝鮮勸說朝不要退出工作組會議，而朝對澳向無好感，澳的勸說只會適得其反。