太后雖飭治行裝準備上路，但意中卻想先除去呂嘉，然後再動身。她眼珠一轉，想出了個借刀殺人的主意。

太后在宮中大擺酒宴，款待漢使，她派人召入丞相以下諸官吏，一同到宮中赴宴。呂嘉雖稱病在家，但這一次也不得不往。

呂嘉臨去赴宴之前，讓他弟弟領兵在宮外環衛，如有不測，也好有個接應。

太后見呂嘉已經列席，便下令行酒。太后回頭對呂嘉說：“南越內屬，是件利國利民的事，為什麼只有你一個人認為不便，苦苦相攔，你究竟是什麼意思？”

呂嘉心中一驚，他料到這是太后藉此話激動漢使來與他作難。他馬上低下頭，只顧看著酒杯一聲不敢吭。

漢使也知道呂嘉是南越內屬的一大障礙，但他們入宮時看到呂嘉的弟弟領兵在宮外巡行，心中雖然惱怒呂嘉，但又不敢下手擒拿他，只好面面相覷，袖手旁觀，並沒有做出任何反應。

呂嘉這才發現在座的各位臉色有些異常，他感到氣氛不對，立即起身退出。太后氣憤漢使的無能，她一把抓起衛士手中的長矛，打算投向呂嘉。南越王趙興，心中擔心會有他變，慌忙起身阻攔太后，呂嘉逃出王宮，就在其弟的甲兵護衛下回家。

第二天，呂嘉聲稱有病，不再朝見趙興。他開始秘密地聯絡親信準備發難。後來呂嘉又轉念一想，南越王趙興，並無歹意，呂嘉心中倒也有些不忍。他了解到他仍然很安全，就放棄了發難的計劃，雙方僵持了幾個月，互相沒有采取行動。

漢武帝接到終軍的奏章，認為南越王國已無問題，只有南越丞相呂嘉一人阻撓，國王和太后孤立勢敵，無法控制，加上中原使節又膽怯手軟，不能當機立斷，必須施加壓力。漢武帝考慮到南越王趙興和太后都已經同意的緣故，認為不必動用大軍，打算只派莊參率兩