立事成，刘如意将来即了帝位，自己即使仍为太后，但刘如意乃戚夫人所生，母以子贵，戚夫人自然得势，自己反要仰其鼻息。而且太子刘盈本是嫡子，转须北面称臣，心中实在不甘。辗转寻思，欲求保全太子之位，却又无法可想，只是日常焦急愁苦，不知如何是好。旁有亲信近侍进言道：“留候张良最善设计，素得主上信用，不如使人寻他设法。”吕后依言，密遣其兄建成侯吕释之往见张良。
此时张良正托病在家学习导引之法，不食米谷闭门不出，已有年余。今闻吕释之求见，张良只得请入相见。吕释之见了张良就说道：“您一直是皇上的谋臣，现在皇上准备换太子，您怎么能够高枕无忧呢？”
张良一听急了，你说我是皇上的谋臣，现在皇上想立的不是你外甥，我没帮皇上出谋划策就不错了，你还过来埋怨我。于是回答道：“当初皇上多次处在危机中，所以采用我的计策。现在天下安定了，皇上因为个人喜好要换太子，这是皇上的家事，即使有一百个跟我一样的谋臣去劝也没有用啊。”这点张良就聪明，在一个不太自信的皇帝手下做事，自己又不十分出众的情况下。甭管太子是不是国本，只要牵扯到皇帝的家事，自己就不应该管。比如后来的岳飞，他的死有一个重要的原因就是太关注皇帝的立嗣问题。一个员工就是老板请来打工的，你管他包养几个大学生？遗产怎么分？