其名由来，众说纷纭，一说孤山之路到此而断，故名；一说段家桥简称段桥，谐音为断桥；一说古石桥上建有亭，冬日雪霁，桥阳面冰雪消融，桥阴面仍然玉砌银铺，从葛岭远眺，桥与堤断之感，得名“断桥残雪”。传说白娘子与许仙断桥相会，确为断桥景物增添了浪漫色彩。也有人说，南宋王朝偏安一隅，多情的画家取残山剩水之意，于是拟出了桥名和景名，后一种说法似更为可取。