漢高祖十一年(公元前196年),劉邦想更換太子，把戚夫人所生的劉如意立為太子。但大臣們都不贊成，劉邦也只好暫時不提。太后呂雉十分擔(dān)心，簡直不曉得此事該怎樣著手才好。有人對呂雉說：“留侯(張良)善于出謀劃策，皇上又很信任他，不妨把他請來商議商議。”呂雉就叫建成侯呂澤把張良硬拉了來，說：“您是給皇上當(dāng)參謀的人，現(xiàn)在皇上天天都想更換太子，您怎能高枕無憂不聞不問呢？”張良說：“過去皇上多半是危急困難關(guān)頭才用我的計策；現(xiàn)在天下安定，他是根據(jù)自己的所愛更換太子，這是骨肉之間的事，像我一樣的大臣縱有百人也于此事無補(bǔ)?！笨墒菂魏钸€是堅持：“您一定要替我想想辦法?！睆埩颊f：“這件事很難用口舌去爭取到的。我想起有4個老人，過去皇上請他們，他們都不愿到皇上身邊來。這4個人(顏師古釋為：園公、綺里季、夏黃公、角里先生)都已經(jīng)年邁了，都是因為平素皇上隨意侮辱儒士，才逃到山中躲起來，決心不在漢政府做官。現(xiàn)在你們要是的確能不愛惜金玉綢緞，多給他們一點，并且由太子親自寫一封信，把話說得客氣點，再派個善于說話的人帶著車子堅決去請他們，我估計他們還是會來的。他們來了，就要把他們當(dāng)作賓客，選擇適當(dāng)?shù)臋C(jī)會，把他們帶著去朝拜，讓皇上見見他們，這樣或許能有所幫助。”于是呂雉就命令呂澤按張良所說的去準(zhǔn)備，那4個人果然請來了。
這個時候，有消息傳來英布起兵叛變。劉邦有病，打算派太子劉盈率兵去討伐。太子請來的那幾個賓客就在一起議論：“我們來是為了保護(hù)太子的?，F(xiàn)在要太子率兵出征，此事十分危險?！贝蠹液嫌嬒雀ǔ珊顓吾屩f：“太子擔(dān)任最高統(tǒng)帥，功勞再大，官位不能再升?？墒侨f一受挫，那么災(zāi)難就從此降臨了。況且跟太子一同出征的各位將領(lǐng)，都是跟皇上打天下的智勇杰出的人物，現(xiàn)在讓太子去統(tǒng)帥他們，跟叫羊去帶領(lǐng)狼沒有什么不同，一定不會聽從太子的指揮，因此不會立功是肯定的。我們聽說‘做母親的愛孩子才去抱孩子’,現(xiàn)在戚夫人日夜服侍皇上，趙王如意也經(jīng)常見到皇上，皇上‘終究不會把品行不好的兒子放到所喜歡的兒子上頭’,很明顯，趙王要替代太子位是肯定無疑的。您怎么不趕快去請皇后找一個機(jī)會向皇上哭泣求情，告訴皇上：‘英布，天下猛將，善于打仗。而各位將領(lǐng)跟陛下都是平輩，教太子領(lǐng)導(dǎo)他們，他們沒有誰能服從命令的。而且英布一旦聽到消息，擊鼓西行，誰能抵御？陛下雖然身體不適，仍請勉強(qiáng)一行，用一種特制的軟車躺在那里指揮，將領(lǐng)們就不敢不全力以赴。皇上雖然勞苦，但是為了您的妻子、兒女考慮，只有強(qiáng)打精神。”呂釋之當(dāng)夜去見呂雉，呂雉找個機(jī)會向劉邦哭訴，把四個人的話一字不漏地說了一遍。劉邦說：“我也在考慮，那小子不能辦事，還是讓當(dāng)老子的親自出馬吧?！?br>劉邦御駕率軍東征。高級官員都留守長安，送別霸上(陜西藍(lán)田北)。留侯張良也有病，勉強(qiáng)起床送到曲郵(今西安東郊),見到劉邦說了幾句抱歉的話，交待劉邦盡量避免跟英布決戰(zhàn)。并建議給太子劉盈加一個將軍的頭銜，統(tǒng)御關(guān)中武裝部隊。劉邦也拜托張良抱病照顧好他兒子。
劉邦自從攻擊英布回來，病情更重了，更急于更換太子。張良規(guī)勸，劉邦聽不進(jìn)去，張良稱病不再問國事。太子師傅叔孫通(太傅)引古論今，愿意用死來保住太子地位。劉邦表面上同意他的意見，但心里還是想更換太子。一次在酒席上，太子給劉邦斟酒，那請來的4個賓客也跟去了，他們一個個都80開外，眉毛胡子全都白了，但是仍然衣冠楚楚。劉邦見了覺得很奇怪，忙問：“這是怎么回事？”那四個人就走上前分別報了姓名。劉邦驚訝道：“我求你們，你們都逃避我，可是現(xiàn)在諸位為什么跟我兒在一起游樂？”4個人同答：“陛下輕視知識分子，動不動就破口大罵他們，我們不愿受侮辱，所以就很惶恐地逃亡躲起來?，F(xiàn)在聽到太子仁愛孝順，對知識分子又很尊重愛護(hù)，天下人沒有不愿意伸長脖子替太子死的，所以我們就回來了。”劉邦說：“麻煩諸位好好護(hù)理太子?！?br>4個人替劉邦敬酒祝壽之后，就很快離開了。劉邦目送他們，并把戚夫人叫來指給她看：“我是想把太子換掉，就是那四個人卻來幫助他，如今羽翼已成，很難變動了。呂雉真是你的主子了?！庇谑瞧莘蛉诉吙捱呂瑁瑒钜苍趧忧榈刂幐?。太子終究沒有更換，這是得力于張良出主意招來的那4個人。