早先，太祖掌管禁軍，曹彬并不依仗這種關(guān)系，除非公事不去太祖那里。大家聚會酒宴他也很少參與，因此更加受到器重。建隆二年，太祖把他從平陽召回，和他說：“我過去一直想親近你，你為什么疏遠(yuǎn)我？”曹彬磕頭道歉說：“我作為周王室親屬，又忝列宮內(nèi)職務(wù)，謹(jǐn)慎做好自己的事還唯恐有過錯(cuò)，哪里敢多結(jié)交？”
七年（開寶七年，公元974年），將討伐江南。長圍中，曹彬經(jīng)常放緩了進(jìn)攻的節(jié)奏，希望李煜降服。城將被攻克時(shí)，曹彬忽然稱病不管事，諸將領(lǐng)都來探視病情。曹彬說：“我的病不是藥物能治好的，只須各位真心實(shí)意發(fā)誓，在攻下城池的那一天，不亂殺一人，那么我的病就自然好了�！北妼㈩I(lǐng)應(yīng)承，一起焚香發(fā)誓。第二日，病情逐漸好轉(zhuǎn)。再下一天日，城池被攻破。
起初，宋太祖對曹彬說：“等到打敗李煜，應(yīng)當(dāng)讓做宰相�！备睅浥嗣李A(yù)先祝賀他。曹彬說：“不會這樣，這次征討，依仗天威，遵照皇上的妙計(jì)，才能取得勝利，我有什么功勞呢，何況宰相是多么重要的位置�。 迸嗣勒f：“為什么這樣說呢？”曹彬說：“太原還沒有平定（爾：句末表示肯定語氣）。”等到得勝回朝，獻(xiàn)上俘虜�；噬蠈Σ鼙蛘f：“本來應(yīng)授予你宰相職位，然而劉繼元還沒有打敗，姑且等一下吧�！甭牭竭@句話后，潘美暗地里看著曹彬笑�；噬习l(fā)現(xiàn)了，立即問什么原因，潘美不敢隱瞞，于是據(jù)實(shí)回答。皇上也大笑，于是賜給曹彬二十萬錢。曹彬退朝后說：“人生何必一定要做宰相，好官也不過是多得幾個(gè)錢罷了�！�
咸平二年，曹彬病倒，皇帝駕臨親手為他調(diào)藥，又賜給他一萬兩白金。六月去世，時(shí)年69歲�；实塾H臨大聲痛哭。