，灌夫就觸犯漢律被免了官。後來他就把家遷到長安城，長安城裡的人沒有一個不說他是個豪爽的君子。後來灌夫又做了一段代地的相。

漢武帝即位後，認為淮陽是天下各地的交通樞紐，是兵家必爭之地。為了穩固統治，就派重兵把守。考慮到灌夫為人耿直，講義氣，漢武帝就把灌夫派到淮陽做了太守。不到半年，漢武帝又把他調到京城中，擔任太僕一職，負責皇帝的車輿。

灌夫也是官運亨通，日子過得不錯。可是灌夫有個大毛病，就是酗酒鬧事。有一天他閒著沒事，就去找長樂衛尉竇甫喝酒，灌夫喝得高興，又喝多了。他藉著酒勁打了竇甫一個耳光，兩人鬧到了漢武帝的面前。漢武帝素喜灌夫的耿直，又討厭竇家在宮中的勢力，所以灌夫打了竇甫，漢武帝心裡直叫好。可是竇甫不是一般人物，他是竇太后的族弟。漢武帝心中也明白，要是讓竇太后知道了，灌夫準得沒命。漢武帝就把灌夫訓斥一頓，把他打發到北邊的燕國做國相去了，並不許兩人再提此事，這樣灌夫又撿回一條命。在燕地呆了幾年，灌夫又犯法丟了官職，只好回長安的家中閒居。

灌夫為人剛直，不喜歡當面奉承別人，而且總是借酒使性子，因而屢次丟官。灌夫最看不起那些勢利小人，從來不去巴結高官顯貴，有時反而想辦法出他們的醜。灌夫對自己手下人或是比自己官位低計程車人則相當看重，越貧賤，他越敬重。他獨獨敬重比自己低賤的人，因而贏得了人心。

灌夫是一介武夫，不通文墨，喜歡交結些俠�