是年九月初一，宋太祖赵匡胤下令征南汉。潘美受命为贺州道行营兵马都部署，统领潭(治今湖南长沙)，朗(治武陵，今湖南常德)等10州兵南下，克富川(治今广西钟山)，直逼贺州。军至芳林镇(今广西贺县北)，贺州守将龚澄枢弃城而逃，潘美遂率军进围贺州。南汉主刘鋹急遣大将伍彦柔率舟师溯贺水北上救援。十月二十日，潘美闻伍彦柔军将至，引军佯退至南乡(今贺县南信都)，沿贺水设伏待击。二十一日晨，乘南汉援军离船登岸之际，突然袭击，歼其大部并俘斩伍彦柔，继乘胜攻克贺州。