据野史笔记传说，宋征舆十六岁时与当时名妓柳如是相恋，因当时松江知府方岳贡下令驱逐外地来的“流妓”，柳如是因之前是苏州人氏，处于被驱逐对象，因此找宋征舆商量，宋性格软弱，建议“姑避其锋”，柳如是大怒，与其断绝关系，陈寅恪《柳如是别传》采用了这个说法，但是未知是否确凿。这个说法虽然是野史，却不断被研究柳如是和宋征舆的学者当做史实用以支撑自己的研究。因此有必要写出，聊备一说。