，把三十人賜給季孫斯，那些馬則交給養馬的人照看。魯定公和季孫斯新得到了女樂，各自享受，白天觀賞歌舞，晚上則在枕蓆之間，一連三天沒有上朝處理政務。孔子聽說這件事後，感到非常悲傷，深深地嘆息。那時，孔子的弟子仲由（子路）在旁邊，他進言說：“魯國的國君對政務疏忽了，老師您可以去實行您的理念了。”孔子說：“郊祭的日期已經臨近，如果大的禮儀還沒有廢棄，那麼這個國家還是有希望的。”到了祭祀的時候，魯定公完成禮儀後就立刻回宮，仍然不去上朝，連胙肉也沒有心情分給群臣。負責分發胙肉的人敲宮門請求命令，魯定公把責任推給季孫，季孫又把責任推給家臣。孔子從祭祀回來，到了晚上，還沒有看到胙肉分發下來，於是他對子路說：“我的理念無法實行，這都是命運啊！”然後拿起琴唱道：“彼婦之口，可以出走。彼女之謁，可以死敗。優哉遊哉，聊以卒歲！”唱歌完畢後，孔子便整理行裝離開魯國。子路和冉有也辭去官職跟隨孔子離開。從此，魯國再度衰敗。史官有詩說：“幾行紅粉勝鋼刀，不是黎彌巧計高。天運凌夷成瓦解，豈容魯國獨甄陶。”
孔子離開魯國後，去了衛國。衛靈公很高興地接待了他，詢問他有關戰陣的事情。孔子回答說：“我還沒有學過這方面的知識。”第二天他就離開了衛國，經過了宋國的匡邑。當地的人們一直怨恨一個叫陽虎的人，看到孔子的相貌與陽虎相似，誤以為陽虎回來了，於是聚集在周圍把他圍住。子路想要出戰，但孔子制止他說：“我對匡邑的人沒有惡意，他們一定有自己的理由，很快就會自己解決的。”於是孔子安坐著彈起了琴。後來衛靈公派人追回孔子，匡邑的人們才知道誤會了，便道歉後離開了。孔子又回到了衛國，在賢大夫蘧瑗家中寄宿。
話說衛靈公的夫人南子，是宋國的公主，長得美麗而且風騷。在宋國的時候，她與公子朝相愛，公子朝也是男子中的美男子，兩人互相愛慕，感情超過了一般的夫妻。南子嫁給衛靈公後，生下了蒯瞶，蒯瞶長大成人後，被立為世子，但南子與公子朝的舊情仍然不斷。當時，還有一個美男子叫彌子瑕，他一直得到衛靈公的寵愛，曾經有一次，他吃了半個桃子，然後把剩下的一半遞給衛靈公吃。衛靈公很高興地吃了彌子瑕給他的桃子，並向別人誇耀說：“子瑕對我真是太好了！一個桃子味道鮮美，他捨不得自己吃，而是分給我吃。”群臣們都暗自發笑。彌子瑕仗著衛靈公的寵愛，為所欲為。衛靈公雖然在外面寵愛彌子瑕，但在家裡卻害怕南子，總是想方設法討好她。於是，衛靈公經常召集公子朝和南子相會，這種醜事傳得人人皆知，但靈公卻不覺得羞恥。蒯瞶對這件事深惡痛絕，於是讓他的家臣戲陽速在公子朝拜見靈公的時候，刺殺南子，以消除這個醜聞。南子察覺到這個陰謀，向靈公告狀。靈公於是驅逐蒯瞶，蒯瞶逃到宋國，然後又逃到晉國。靈公立蒯瞶的兒子輒為世子。當孔子再次來到衛國時，南子請求拜見孔子。她知道孔子是聖人，所以對他特別尊敬。有一天，靈公和南子一起乘車出門，讓孔子坐在旁邊的車上。當他們經過市區時，市場上的人們唱著：“同車者色耶？從車者德耶？”
孔子嘆道：“衛靈公你對道德的追求不如追求色慾！”於是孔子離開衛國，前往宋國，在一棵大樹下與弟子們學習禮儀。宋國的司馬桓魋曾因為美貌而得到景公的寵愛，現在他正處於權力巔峰，但是他忌恨孔子的到來。於是他派人砍伐了孔子學習禮儀的那棵大樹，還想殺害孔子。孔子得知訊息後，換上便裝離開宋國，前往鄭國。孔子準備前往晉國，當他到達河邊時，聽說趙鞅殺了賢臣竇犨和舜華，他嘆息道：“鳥獸都會厭惡傷害自己的同類，何況是人呢？”於是他返回了衛國。沒過多久，衛靈公去世，國人立蒯瞶的兒子輒為國君，這就是衛出公。蒯瞶也藉助晉國的力量，與陽虎襲擊戚地並