高帝既平桂阳，迁中领军，领南兖州，高帝固让，与彦回及卫军袁粲书陈情，彦回、粲答书不从，高帝乃受命。其年加彦回尚书令、侍中，给班剑二十人，固让令。三年，进爵为侯。服阕，改授中书监，侍中、护军如故，给鼓吹一部。
时淮北属，江南无复鳆鱼，或有间关得至者，一枚直数千钱。人有饷彦回鳆鱼三十枚，彦回时虽贵，而贫薄过甚，门生有献计卖之，云可得十万钱。彦回变色曰：“我谓此是食物，非曰财货，且不知堪卖钱，聊尔受之。虽复俭乏，宁可卖饷取钱也。”悉与亲游噉之，少日便尽。
明年，嫡母吴郡公主薨，毁瘠骨立。葬毕，诏摄职，固辞，又以期祭礼及，表解职，并不许。
苍梧暴虐稍甚，齐高帝与彦回及袁粲言世事，粲曰：“主上幼年，微过易改，伊、霍之事，非季世所行，纵使功成，亦终无全地。”彦回默然，归心高帝。及废苍梧，群公集议，袁粲、刘彦节既不受任，彦回曰：“非萧公无以了此。”手取事授高帝。高帝曰：“相与不肯，我安得辞。”事乃定。顺帝立，改号卫将军、开府仪同三司，侍中如故，甲仗五十人入殿。
及袁粲怀贰，曰：“褚公眼睛多白，所谓白虹贯日，亡宋者终此人也。”他日，粲谓彦回曰：“国家所倚，唯公与刘丹阳及粲耳，愿各自勉，无使竹帛所笑。”彦回曰：“愿以鄙心寄公之腹则可矣。”然竟不能贞固。
及高帝辅政，王俭议加黄钺，任遐曰：“此大事，应报褚公。”帝曰：“褚脱不与，卿将何计？”遐曰：“彦回保妻子，爱性命，非有奇才异节，遐能制之。”果无违异。
及沈攸之事起，高帝召彦回谋议，彦回曰：“西夏衅难，事必无成，公当先备其内耳。”高帝密为其备。事平，进中书监、司空。
齐台建，彦回白高帝，引何曾自魏司徒为晋丞相，求为齐官。高帝谦而不许。建元元年，进位司徒，侍中、中书监如故，改封南康郡公。彦回让司徒，乃与仆射王俭书，欲依蔡谟事例。俭以非所宜言，劝彦回受命。终不就。寻加尚书令。二年，重申前命为司徒，又固让。
魏军动，高帝欲发王公以下无官者从军，彦回谏以为无益实用，空致扰动，上乃止。
三年七月，帝亲尝酎，盛暑欲夜出，彦回与左仆射王俭谏，以为“自汉宣帝以来，不夜入庙，所以诫非常。人君之重，所宜克慎”。从之。
时朝廷机事，彦回多与议谋，每见从纳，礼遇甚重。上大宴集，酒后谓朝臣曰：“卿等并宋时公卿，亦当不言我应得天子。”王俭等未及答，彦回敛板曰：“陛下不得言臣不早识龙T。”上笑曰：“吾有愧文叔，知公为朱佑久矣。”
彦回善弹琵琶，齐武帝在东宫宴集，赐以金镂柄银柱琵琶。性和雅，有器度，不妄举动。宅尝失火，烟爓甚逼，左右惊扰，彦回神色怡然，索舆徐去。然世颇以名节讥之，于时百姓语曰：“可怜石头城，甯为袁粲死，不作彦回生。”
高帝崩，遗诏以为录尚书事。江左以来，无单拜录者，有司疑立优策。尚书令王俭议，以为“见居本官，别拜录，应有策书，而旧事不载。中朝以来，三公王侯，则优策并设；官品第二，策而不优。优者褒美，策者兼明委寄。尚书职居天官，政化之本，故尚书令品虽第三，拜必有策。录尚书品秩不见，而总任弥重，前代多与本官同拜，故不别有策。即事缘情，不容均之凡僚，宜有策书，用申隆寄。既异王侯，不假优文”。从之。寻增彦回班剑三十人，五日一朝。
顷之寝疾。彦回少时尝笃病，梦人以卜蓍一具与之，遂差其一，至是年四十八矣，岁初便寝疾。而太白荧惑相系犯上将，彦回虑不起，表逊位。武帝不许，乃改授司空、骠骑将军，侍中、录尚书事如故。薨年四十八，家无馀财，负责数十万，诏给东园秘器。
时司空掾属以彦回未拜，疑应为吏敬以不？王俭议：“依礼，妇在涂，闻夫家丧，改服而入。今掾属虽未服勤，而吏节禀于天朝，宜申礼敬。”司徒府史又以彦回既解职，而未恭后授，府应上服以不？俭又议：“依中朝士孙德祖从乐陵迁为陈留，未入境，卒，乐陵郡吏依见君之礼，陈留迎吏依‘聚女有吉日，齎衰吊
’。司徒府宜依居官制服。”又诏赠太宰，侍中、录尚书、公如故，增班剑为六十人，葬送礼悉依宋太保王弘故事，諡曰文简。先是庶姓三公，车需车未有定格，王俭议官品第一，皆加幢络，自彦回始也。又诏彦回妻宋故巴西主埏隧暂S，宜赠南康郡公夫人。
长子贲字蔚先，少耿介。父背袁粲等附高帝，贲深执不同，终身愧恨之，有栖退之志。位侍中。彦回薨，服阕，见武帝，贲流涕不自胜。上甚嘉之，以为侍中、领步兵校尉、左户尚书。常谢病在外，上以此望之，遂讽令辞爵，让与弟蓁，仍居墓下。及王俭薨，乃骑水牛出吊，以系门外柱，入哭尽哀而退，家人不知也。会疾笃，其子霁载以归。疾小间，知非故处，大怒，不肯复饮食，内外合悉钉塞之，不与人相闻，数日裁馀气息。谢7闻其弊，往候之，排合不可开，以杵捶破，进见贲曰
：“事之不可得者身也，身之不可全者名也，名与身俱灭者君也，岂不全之哉！”贲曰：“吾少无人间心，岂身名之可慕。但愿S手归全，必在旧陇。儿辈不才，未达馀趣，移尸徙殡，失吾素心，更以此为恨耳。”永明七年卒。
蓁字茂绪，位义兴太守。八年，改封巴东郡公。明年，表让封还贲子霁，诏许之。建武末，蓁位太子詹事、度支尚书，领前军将军。永元元年卒，赠太常，諡穆子。
蓁子向字景政，年数岁，父母相继亡没，哀毁若成人，亲表异之。及长，淹雅有器量，位长兼侍中。向风仪端丽，眉目如画，每公庭就列，为F所瞻望焉。仕梁，卒于北中郎庐陵王长史。子翔。