王蕃，字永元，是庐江郡人。他博览群书、见识广博，还通晓各种技艺。起初担任尚书郎，后来辞官。孙休即位后，他与贺邵、薛莹、虞汜一起担任散骑中常侍，都加授驸马都尉，当时的舆论都称赞他们清廉正直。王蕃曾奉命出使蜀国，蜀国人对他十分称赞，返回后担任夏口监军。