他原本就生性風流，如今置身珠翠填咽之地，自然不肯辜負了大好的青春韶華。

公務之余，杜牧幾乎把所有時間，就都花費在了追逐聲色、偎紅倚翠的風流生涯上，幾乎沒有哪個晚上，杜牧不是在青樓度過的。

杜牧的行為，牛僧孺全都看在眼里。他沒有聲張，只是吩咐了三十名士卒，每天便裝跟從在杜牧身后，暗地里保護他的安全。而杜牧對此一無所知，還以為自己的風流形跡掩藏得很好，私下里頗有些得意。

時間一晃就是幾年。這一年，杜牧被擢升為侍御史，牛僧孺為他餞行，席上告誡杜牧說：“憑著你的才華氣概，自然能平步青云，我沒有什麼好說的。

我所擔心的是，閣下追逐聲色太過，恐怕對身體不利，還應有所節制才是。”

杜牧不知道自己這些年的行為都在牛僧孺的掌握之中，于是抵賴說：“我一向潔身自愛，哪里有這樣的事情！您未免憂慮太過了吧！”

牛僧孺沒有正面回答，只是笑著讓侍從拿過一個小匣子，當著杜牧的面打開，里面滿滿的都是被派去保護杜牧的士卒寫來的密報，上面盡是“某年月日，杜書記在某某家過夜，平安無事”“某年月日，杜牧在某某家宴會，平安無事”之類的記載，總數大概不下數百。

杜牧看過，非常慚愧，而對牛僧孺待自己的寬容和關愛，也是充滿了由衷的感激。

終杜牧一生，對牛僧孺都充滿了尊崇與敬意；而當牛僧孺死后，杜牧更是竭盡才華，為牛僧孺撰寫了一篇充滿贊美與深情的墓志銘，以此報答他對自己的知遇之恩。

數年的揚州生涯，給杜牧留下了美好的印象。后來，當青春不再，少年時光一去不返，他留下了混合著懷戀與惆悵的詩句，來紀念這段難忘的日子：

落魄江湖載酒行，楚腰纖細掌中輕。

十年一覺揚州夢，贏得青樓薄幸名。

觥船一棹百分空，十載青春不負公。

今日鬢絲禪榻伴，茶煙輕飚落花風。

杜牧做了幾年御史，后來分管洛陽的事務。御史的工作是督察百官，維護吏治，所以一般官僚對御史都有幾分忌憚之心。

那時一個姓李的司徒退職閑居，洛陽城中的名士紛紛前往拜見。李司徒家里蓄有許多歌伎，相貌才藝，號稱當時第一。

一次召開宴會，遍請洛陽名士，因為杜牧身為御史，所以就沒敢邀請他。宴席已經召開，杜牧才聽說這件事，但他還是專門委托了一位客人，向李司徒傳達了自己希望參加這次宴會的愿望。李司徒聞訊，連忙派人拿著請帖，邀請杜牧前來。

杜牧料到李司徒一定會邀請自己，于是一邊喝酒，一邊等待。李司徒的請帖送到，杜牧已經微有醉意。拿到請帖，杜牧立刻起身。趕到李司徒家的時候，客人們正在飲酒，酒席前有上百的歌女，個個容貌美麗，才藝不凡。