兰溪古城东依大云山，西临兰江，略呈半月形。旧有四门：东谓安政门，南叫明德门，西为清波门，北称拱宸门。东北水阙门、沿江隆礼门（水门码头）以及柳家码头、朱家码头等三处便门，则于明代增辟。因历遭战祸，年久失修，古城城墙已大部毁圮。现在沿江尚存的600余米城墙为明正德七年（1512）重筑，其余则为1995年重修，依稀还可领略兰溪古城的独特风貌。
西门城楼兰溪古城旧有南、西、北三座城楼，均始筑于明正德七年（1512）。至抗战时期（1939）为防空袭，便于疏散人员，南、北门城楼随东、南两面的城墙一同拆除，西门城楼，则因西面沿江城墙作防洪护岸未拆，而得以保留作悬钟报警之用。1985年，西门城楼倒坍。现有西门城楼，于1995年重建。主楼2层，依江而立，气势雄伟，为登临揽胜的佳处。
民居市区延安路以南福灵巷至风筝巷一带民居，至今仍较为完整地保留着明清时期的民居风貌。
这一民居群落占地面积约3公顷，依山傍水，东西向布局，起伏有致，与自然环境相协调。平面多为“三间二过厢一天井”，一般为二层，木结构，灰瓦白墙，室内雕刻精美华丽，有高出屋面的封火墙。兰溪民居独特的形式，对徽州民居的发展起了一定的作用。
小巷清末兰溪城内有大小街道21条，巷87条。市区延安路以南民居群落内的探花、忠锡等小巷，至今仍保存着明清街巷的特色风貌。这种小巷窄而幽长，对消防起一定作用，为加强两面山墙的刚性，两个山墙间均有夯墙连接。这是兰溪古代工匠对“巷”的创新，堪称“建筑的杰作”。
