公元前316年，燕王啥将王位让给了其相子之，引起了燕国内乱。齐大臣沈同私下问孟子是否可以伐燕，孟子认为可以。但齐宣王派匡章伐燕，孟子却认为是以暴伐暴（《孟子·公孙丑下》）。齐军攻下燕后，齐宣王想吞并它，征求孟子的意见，孟子认为要视燕国百姓而定。取燕后，面临着诸侯干涉的威胁，齐宣王又问计于孟子，孟子劝他速从燕国撤兵（《孟子·梁惠王下》），齐宣王拒不接受，结果君臣之间矛盾越来越大。齐宣王为了缓和矛盾，准备召见孟子，孟子却称病不朝。第二天却又出去吊东郭氏。齐王派人来问病，并派来了医生。孟仲子使人半路上阻拦孟子，劝他去朝见齐王，孟子却躲到景丑家留宿。面对景丑的指责，他却答以“将大有为之君，必有所不召之臣”，认为不能以爵尊而轻慢齿尊和德尊（《孟子·公孙丑下》）。

　　公元前312年，燕人叛齐，齐宣王吞并燕国的计划彻底告败。为此，他自觉“甚惭于孟子”。齐臣陈贾在孟子前替齐王辩护，遭到了孟子的指责（同上）。自此，孟子就要辞去卿位，离齐还乡。宣王主动去见孟子，表示挽留，并打算在临淄城中给他一幢房舍，予以万钟的厚禄。孟子却不接受，决计离齐。在回邹国的途中，孟子心情非常复杂。他在齐边邑昼连住了三晚，希望齐宣王改变态度，亲自来昼挽留他。但齐宣王始终未来，他才在失望中离开了齐国。