宋義出使齊國，本是項梁要他遊說齊相田榮出兵攻秦的，但他卻把對高陵君顯說過的項梁必敗的話對田榮也說了，這下田榮更不願出兵助楚。他在齊國盤桓了多日，項梁這邊一敗，他立馬回到楚營，意欲取代項梁，掌控軍權。但因他原先在軍中隻是一個謀士，論資格遠不如範增、召平、陳嬰等人，眾將如何肯聽他的。他召集眾將議事，桓楚、英布、蒲將軍當場就頂撞他：“你算老幾，縱大將軍不在了，項家還有其他人，軍中還有其他將軍。論智謀貢獻，範老比你如何？這裏還輪不到你說話，該哪玩兒哪玩兒去，別在這裏惡心我們。”
宋義被噎得嘴打哆嗦，手指頭點著地說：“我算老幾？老楚國時期我就做大官，就是項大將軍在也要聽我的，你們還不服嗎？”
範增諷刺道：“可惜現在不是老楚國，敢情這新楚國是項將軍聽了你的話才立的？”
宋義自知勢單力薄，與諸位爭吵有害無益，隻好用話敷衍道：“我是好心，怕楚軍一時群龍無首，各幹各的，不能一心應對秦軍。各位再不服我，作為老臣，我也要盡到自己的責任。”說完，不待眾人發言，揚長而去。
高陵君顯此時還在楚營中。宋義在眾將那裏碰了一鼻子灰後，認為在楚營很難繼續混下去，於是找顯商量，希望得到他推薦，到齊國謀個一官半職，以維持他一直高消費的生活。
顯卻反對：“楚軍現在群龍無首，正是將軍大顯身手之時，以我對將軍的了解，也完全可以勝任。功名就在眼前，何須舍近投遠？”然後咬耳朵與他密謀了一番。
項梁活著時，楚王熊心隻是一個傀儡王，近有陳嬰把持，遠有項梁遙控，動輒得咎。起初他對這種受製於人的日子還能接受，久而久之，耐不住身邊近侍和一些老夫子如呂青之流的慫恿，竟要掌實權！由此遭到項梁的幾次訓斥，說好不好還把他趕回薛縣農村放羊去！熊王雖不敢反抗，但心裏窩的火必定很大。