1954年3月底，江青从杭州回到北京，除了匿名信事件使她极其不快之外，又一件事使她非常尴尬、非常难受，给了她重重的一击：那是她知道毛泽东喜欢游泳，擅自提议给毛泽东修建游泳池，遭到毛泽东的严厉批评。
毛泽东自从住进北京中南海之后，每日忙于政务，空闲时则总是半躺在床上看书。保健医生以为，毛泽东终日没有运动，对健康不利。知道毛泽东喜欢游泳，“投其所好”，鼓励毛泽东在空余时游泳。
中南海在解放前就有一个露天游泳池，长50米、宽25米，南深北浅。在深水区那边，还有10米跳台和3米跳板。不过，中南海的工作人员以及家属都到那里游泳。考虑到毛泽东的安全，保卫部门只能让毛泽东在早上游泳池尚未开门或者晚上关门之后去那里游泳。不过，到了冬日，室外游泳池的水冰凉以至结冰，无法游泳，毛泽东只得改到清华大学的室内游泳池去游泳。清华大学离中南海远，何况毛泽东一到那里，需要清场，深感不便。
江青看在眼里，擅自提议给毛泽东修建室内游泳池。不过，那个游泳池不是建在中南海，而是建在北京玉泉山一号楼，因为毛泽东有时候也住在那里。据中直修办处的田恒贵回忆，这个游泳池很小，也就和一个大客厅差不多大。
游泳池造好了，江青满心欢喜向毛泽东报告，期望毛泽东会非常高兴。
出乎江青的意外，毛泽东却发脾气了。毛泽东以为，动用公家的钱，为他建造游泳池，那是绝对不允许的。
毛泽东要江青为此事写检讨。
1954年4月20日，江青给毛泽东写了一封信，在信中对她擅自提议给毛泽东修建游泳池一事作了检讨。
4月25日，毛泽东把江青的检讨信，转交刘少奇、陈云、邓小平等阅，并写下一段批示：
刘、陈、邓、罗瑞卿、尚昆、汪东兴诸同志：
江青此信请阅。为补救计，建造费五亿由我的稿费中支出，游泳池封闭不用。
毛泽东 1954年4月25日[170]
毛泽东批示中所说的“建造费五亿”，是指当时的旧人民币计算的。中国人民银行从1955年3月1日起发行新人民币（也就是现在所用的人民币。一万元旧人民币，相当于一元新人民币）。所以，“建造费五亿”，也就相当于五万元新人民币。五万元人民币在1954年是相当大的数字！
江青一连受到两次打击，心境也就变得益发沉闷。她仍处于养病之中。
1954年6月24日，毛泽东在写信给堂弟毛泽荣（又名毛胜五）的时候，提及“江青病况略有进步”：
胜五弟：
你给我的信都收到了，很高兴。江青病况略有进步，她对你的关怀，甚为感谢。孩子们都好。你们都好吗？
祝进步
毛泽东 1954年6月24日
1954年10月1日国庆节。江青跟随毛泽东在天安门城楼上观看阅兵式、表演和烟火。赫鲁晓夫来了。周恩来很注重礼节，走过来要把江青介绍给赫鲁晓夫。
这时，毛泽东突然站了起来，走向江青，把江青领到沿城楼边的一处地方，避免她与赫鲁晓夫见面。
这件事也给江青的心里留下了阴影。这表明，毛泽东不愿把江青作为“第一夫人”介绍给赫鲁晓夫，避免江青以“第一夫人”的身份出现在苏联媒体的报道之中。