女儿，反由白发人送，悲何巨哉！在父亲辞官归隐的最初几年，家中欢笑不断，频频唱和，是纨纨作品多产时期。父亲作《秋日村居》诗八首，叶纨纨与母亲、弟妹均有和诗，这些和诗深得父亲的好评。
在和父亲《秋日村居》八首诗中，叶纨纨描画了一个读书人家在乡村悠闲自在的生活，琴书在床，临风对月，与世间俗事毫无关涉，“木榻藏书卷，疏花对酒杯。”“石壁堪题画，藤床可卧云”。这种乡村生活简直就是神仙过的日子。主人淡漠世俗荣辱，甘于清贫简朴，放弃官宦仕途，“幽居甘寂寞，白眼任相看。”只要有书可读，“但凭书帙隐，”不问世事荣枯，面对萧瑟秋风，滔滔流水，笑看古今兴衰就如东逝的流水，仿佛只是一瞬间的事。“古今摇落尽，流水独滔滔”。端起一杯酒，在萧瑟的西风里，凭几自快，回首而望，俱如云烟飞散，剩下“虚庭夜月间。”把追求摆脱尘世看作是极大的快乐，也是作者生活的憧憬。
受家风影响，叶纨纨平时非常注重自己的言行，务必使自己的言行合乎礼数，对待别人宽厚仁慈，即使是仆人、婢女也都好言相待，和婢女之间形成了如同姐妹的感情，年岁相仿的纨纨与婢女常一同出游，一同戏耍，感情融洽。在一组《浣溪沙》的词中，有写给婢女的几首，中有：“欲比飞花态更轻，”“柳腰袅娜袜生尘”，“日长深院理秦笋”之句，把一个正当青春的女子，生动地描画了其容貌的美丽，体态的姣好，象赞扬婢女的诗作在古时已属少见，何况纨纨还有为死去婢女写的悼亡诗呢，诗中诉说主仆二人数年之间结成的深深情谊，“数载依依共晓昏”，可婢女却不幸亡故，使主人常常惆怅不已，“惆怅屏前空断魂”，显见二人感情已越出了所谓主仆关系。
早岁生活的快乐，娘家生活的舒心，掩盖不了纨纨内心的愁苦，而这均来自不幸的婚姻。纨纨的婚姻，还在纨纨不满周岁时，就由父母作主许配给了同邑的袁氏，即袁若思的第三个儿子袁崧。袁家与叶家是几代世交，袁黄与叶重弟是同榜进士，叶绍袁从小就寄育在袁家，叶绍袁又与袁若思从小同学，同一年考取进士。因此渊源，将纨纨许配给袁若思的儿子，使亲上加亲，可以使两家的情谊得到巩固和发展，本以为给女儿找了一个好婆家的叶绍袁，却想不到从此使女儿过上不幸的婚姻生活。
袁若思致书叶绍袁，因将任广东欲，为子成婚，纨纨嫁到袁家。第二年，袁若思调任广东，任高要县县令，纨纨与她的丈夫及其他家人跟随袁若思同去广东。从水乡的汾湖到炎热的南方，途中还要经