秦观19岁娶潭州宁乡主簿徐成甫长女徐文美为妻，45岁纳了身边的侍女边朝华为妾。秦观被称为风流才子，其中最著名的就是《苏小妹三难新郎》，这个故事是虚构的，最早见于明代冯梦龙的小说《醒世恒言》，苏小妹十六岁时，慕名求婚者不计其数，秦观也看中苏小妹是一个秀外慧中的美丽少女，心生爱慕。可多少亲朋给小妹做媒她都不允，立志要选个天下才子做夫婿，在评阅众多求亲者呈上的文章时，看中了淮海居士的才气。就在秦观高中进士发榜之日，与苏小妹双双拜堂，喜结良缘。古灵精怪的苏小妹就在这晚，出了三道难题考验新郎秦观，三题都中，才准入房。“三难”佳话，虽千古流芳，却跟《梁祝》一样，是虚构的，只是作者对于才子配佳人的美好愿景而已。