候潮门始建于五代时期的吴越国，因筑城时以竹笼装砖石，用车运至城下充当城基，故被命名为竹车门。南宋年间这处城门进行重建，因其濒临钱塘江，每日都可以观潮起潮落，故改名为候潮门。南宋词人周密所著的《武林旧事》一书中还有南宋孝宗皇帝从候潮门出城观潮的记载。而候潮门外也修筑了不少专门用于观潮的楼阁，如映江楼、草阁、映发亭、樟亭驿等等。
这试千户大人的队伍一路行至候潮门外的时候，守门的士兵已经在将横在道边的拒马搬回城门内，准备要关门歇业了。看着这队人匆匆而来，带队的小校不耐烦地摆摆手道：“今日已不可入城，明早再来！”
“这位大人且慢，都是自己人，自己人！”这边的随从连忙快步过去，向这小校表明了这队人的身份来历，并且向其出示了宁波府定海卫签发的公文，上面注明了试千户乔南到杭州府办理军务的事宜。