汉高祖刘邦想废太子，立宠妃戚夫人的儿子如意为太子。
吕后知道此事后，万分焦急，忙叫其弟吕泽去请张良出主意。
张良说：“皇上有四个想招而招不来的人，这四人已经很老了，但都是德高望重之人。如果能把这四个人请出来辅佐太子，并且让皇上见到他们，这对太子很有利。”
吕后采纳了张良的计策，让吕泽带着太子的书信，将四人请入宫来，厚礼相待。
汉高祖十二年（公元前195年），刘邦平定英布回到长安，患了重病，换太子的念头更甚。一天，刘邦在宫中举行酒宴。
太子亲自为四个白发老者酌酒。刘邦问他们姓名，四人上前各报自己的姓名，原来是东园公、角里先生、绮里季和夏黄公。
刘邦惊讶地说：“我访求你们好几年，你们躲着不肯出山，现在为何跟随我儿呢？”四人齐说：“太子仁孝，爱护贤士，天下有识之士都拥戴太子，所以我们也来为太子效命。”刘邦见太子有四人辅佐，便以为太子“翅膀已硬，难以动摇”，从此，打消了更换太子的念头。
