但是,齐桓公并没有认清自己成就霸业与时机、大势的重要关系,只是认为自己南征北战、功勋卓著、国家富庶、兵强马壮,因此剑锋所指,诸侯莫敢不从。齐桓公认为自己九合诸侯的功业堪比夏商周三代受命于天,于是打算封泰山、禅梁父,管仲三番两次以理相劝都不能阻止齐桓公。无奈之下,只好对齐桓公说:“古人封禅,必须有鄗地的黍、北里的禾、江淮一带胜仗的三脊茅草、东海的比目鱼、西海的比翼鸟,然后祥瑞的灵物就会不召而至。现在凤凰和麒麟没有出现,佳美的谷物也没有生长出来,田里杂草丛生、乌鸦乱飞,这样的情况岂可封禅!”齐桓公无言以对,只好作罢。心中的无奈,何人可知?

齐桓公虽然并没有真正将封禅付诸实践,但是此事说明齐桓公的野心已经越来越大,而且被自己取得的成果冲昏了头脑。在这样的情况下,齐国的霸业走向衰落。

葵丘之会以后,齐国的霸业虽然已经逐渐衰落,但仍然维持了一段时间。鲁僖公九年(公元前651年)九月(由于《春秋》是按照鲁公纪年,故而研究春秋历史的著作多用周王纪年或鲁公纪年),晋献公去世,晋献公指定因为受宠而被立为夫人的骊姬之子奚齐继承国君之位。晋国的大夫里克认为奚齐的君位得来不正,心中不服,于是纠集党羽杀死了奚齐,而后骊姬妹妹的儿子、奚齐的弟弟公子卓即位为国君,又被里克等人杀死。晋献公的几个儿子死的死、逃的逃,晋国从此群龙无首,陷入内乱之中。

齐桓公见此情况,便召集各国诸侯会师伐晋,来平定晋国的叛乱,大军到达高梁(今山西临汾东北)之后就回去了。里克杀死奚齐和公子卓之后,派人迎接流亡在外的公子重耳回国即位,重耳婉言谢绝,里克转而迎接同样流亡在外的公子夷吾回国。夷吾一方面又想回国,一方面又担心其中有什么阴谋,于是派人到秦国请求援助,以即位之后割地给秦国的承诺换取秦穆公派兵送他回国。

后来秦穆公果然派军护送夷吾回国,作为霸主的齐桓公也派出了齐国大夫隰朋率领部队与秦军会师,共同护送公子夷吾回晋国。第二年四月,隰朋与周天子派来的周公忌父和王子党共同在晋国立公子夷吾为晋惠公。这是黄河上游的秦国第一次与黄河中下游的诸侯国正式发生政治联系,而且也可以看出齐国此时仍然实力鼎盛,有能力参与与之不相伯仲的晋国的废立之事。

不久以后,狄人再次来袭,灭掉了温国,温国的国君逃到了卫国,狄人也继续入侵,袭扰卫国、郑国。这时齐桓公并没有像往常一样召集诸侯,大张旗鼓地去讨伐狄人,而是联合许国一起讨伐了北戎,以此牵制戎狄的入侵。

鲁僖公十一年(公元前649年)夏,之前与周襄王争夺王位失败的王子带不甘心接受失败的结局,于是勾结了扬邑、拒邑、泉邑、皋邑以及伊、雒一代的戎人进攻周王的京城,焚毁了王城的东门。秦穆公听说这个消息,赶快集结军队,联合晋惠公共同带军前来救援周天子,齐桓公也派了管仲和隰朋代表周王室和晋国前来与戎人进行和平谈判,多方合力之下,戎人终于退兵了。