南墙指的是影壁墙。古代房屋的方向大都坐北朝南，大门进来还有一堵墙，叫“照墙”或“影壁”，不仅能遮挡外人的目光，而且可以阻拦直来直去的气流。这堵墙就是“南墙”，从正房门出来向外走时，必须避开它绕着走，否则就会一头撞上。

南墙即影壁墙，是中国传统建筑中用于遮挡视线的墙壁。

中国建筑大门一般都是朝南开的，旧时代有地位、有势力的人家大门外都有影壁墙，出了门就要向左或右行，直着走会撞到南墙。

不撞南墙不回头这种现象比喻某人的行为固执，听不进不同意见。与“一条道走到黑”、“不到黄河心不死”有相同义项。