隋朝杭州筑城时就有钱唐门，为当时的西北城门。唐武德四年（621年）为避国号，改“唐”为“塘”，此后1300多年未改名、未易地。南宋绍兴十八年（1148年），钱塘门进行了一次重大修缮，同时也迎来了它最为繁盛的时期。
杭州自五代吴越国开始就有着“东南佛国”的美誉，到了南宋时期，钱塘门外更是多佛寺、楼台，并形成了以西湖为中心，辐射杭州市区范围内众多寺庙宫观、以民间传统庙会为表现形式的西湖香市。往灵隐、天竺进香者，多由此门出入。《杭俗遗风》中这样描写西湖香市盛况，“自朝至暮，道路终日为之堵塞，摩肩接踵，不下数十万人”。此时若从城楼上向下眺望，满眼尽是背着香篮的香客，于是便有了“钱塘门外香篮儿”的民谣。1913年，杭州拆除钱塘、涌金、清波三门的城墙，改建湖滨路、南山路，从此西湖与市区紧密相连。
2008年，在对钱塘门的考古发掘中，钱塘门遗址被发现，包括南宋特有的“香糕砖”、门道、门洞侧壁基础、城墙夯土等主要遗迹。2011年，钱塘门遗址作为杭州十四处文化史迹点中的“重大历史事件史迹”，为西湖申遗贡献了力量。
