武宗不顾群臣反对，决定亲自率兵去征讨。他先把刘美人移居通州，和她约定，武宗带兵先行，再派人返回来接刘美人随驾同行。临别之际，两个人柔情密意，难舍难分，刘美人取下一簪，送给武宗，作为凭信，半娇半嗔的约定说：“见簪而后赴。”武宗将簪藏在衣中。但武宗在过卢沟桥时，纵马驰奔，簪子不幸失落。武宗吩咐近侍随从四处寻找，几天几夜，毫无踪影。

武宗驰奔临清州，遣中使宣召刘美人南行。中使传旨，刘美人不见信簪，辞谢说：“不见簪，非信，不敢行。”武宗见美人心切，没有办法，便独自乘舸昼夜兼行，直奔张家湾，亲自迎接美人。刘美人这才和武宗一同南行。随驾而行的大小官员一早上起来发现皇帝不见了，谁也不知他返回京城去接刘美人，大家都急疯了，到处寻找。武宗却丝毫不知群臣为他如此焦急，返回临清的途中仍然优哉游哉，路上遇到湖广参议林文缵的船，还登舟而入，抢了一个他的美妾走。一行到达扬州，武宗常带数骑游猎扬州城西，并宿于上方寺。刘美人见武宗天天如此，兴致极浓，怕突遭不测，便进谏武宗，武宗于是终止。刘美人于是在扬州名声大噪，都称她为刘夫人。从上方寺到南京，武宗、刘美人所临幸的寺观锦绣，旌旗蔽日，梵贝夹册充盈。凡是武宗的一应赏赐，都写上“威武将军镇国总督及夫人刘氏。”