吴劳模的风光和荣誉也使桂芳感到格外的体面和喜悦，子女们在社会上也有一种根红苗壮的安全感。时光已到了1955年，此时吴家又陆续新添了四子吴实、五子吴华。吴劳模夫妻全身心投入于村里的工作，无心经营家中事业，一般农家都是猪马牛羊鸡鸭鹅齐全，他家却只有零星鸡鸭和一口猪，老大吴全读完小学便跟随父母干些农活已经到了谈婚论嫁的年龄。
这时正逢农业合作化的高峰，衣食完全依赖于集体，已经看出家庭劳力少人口多生活日见困难的迹象。偏在这一年又生下六子吴为，生活重担一下子全压在老吴和老大身上，桂芳因有年迈体弱多病的婆婆和幼子需要照料，忙于繁重的家务。老吴夫妻看着渐渐长大的吴全，忙着张罗婚事，年迈多病的老母又不断催办着急抱重孙，又有许多村里邻村的姑娘相中了老大。吴全看着家中境况，老二老三陆续到了求学年龄增加了家中开销，如果自己结婚，彩礼婚庆无疑会给这个家庭雪上加霜，他决心延缓自己的婚事，为父母分忧，为弟弟们上学创造条件。吴劳模的孩子虽多却都是男孩，吴劳模非常想要女孩，真是天随人愿，1957年霜降桂芳生下小女，取名吴霜。吴劳模的父亲和他自己都是单传，到了他的下一代改变了遗传路线，儿女成群，多子多福多寿有了吴霜后的第二年，吴劳模去省里开会返回的路上，看到村里队员们正在挖大菜窖，他也走去加入挖菜窖的行列，他与另一人扛着搭菜窖横梁的圆木刚好走到两边各自的位置，搭伙的那个人也没有打招呼就把肩膀一抖自己扛的一头形成的向下冲力，把老吴闪了一下不幸地掉入菜窖摔成重伤公社安排住了院。这样一来，家庭人口本来就多孩子又都比较小，生活的重担一下子全都落到了桂芳和吴全的身上，桂芳既要出工又要照料家里，起早贪晚累出一身病，刚四十出头看上去已经满脸邹纹显得很憔悴，但她性情刚强，咬着牙坚持着。好在乡里考虑劳模因公负伤又是省劳模，免费为其看病，考虑他病好后一时干不了农活，便安排到乡供销社转为国营工人打更。老二在村里的小学毕业，看到家中景象不忍继续求学，但老大说服父母力主让二弟继续求学，二弟选择了减免学费的师范学校。这样的选择无疑意味着老大自己只好继续延迟自己的婚事。孩子们冬天身上穿着破旧的露着棉花的空心袄和棉裤，脚上穿着露脚趾的棉布鞋，桂芳看着心疼也只好哪破了补哪，边补边落泪。桂芳也想到亲属或者左邻右舍去借粮借钱，可人家不敢借怕的是借了还不起。老大的婚事更让桂芳揪心，决心把老大的婚事先办了再说，可是家中无钱，这时只好硬着头皮向亲戚借钱。俗话说，救急不救穷，给穷人借钱是往灶坑里扔钱，是肉包子打狗有去无回，难怪有钱人看到穷人来借钱心就发狠，用钱去填穷坑，不能填。无奈之下桂芳舍着脸到同母异父的妹妹家借钱，走进人家的家门，那位妹妹一见到她，看到是姐姐，想象中却变成了穷坑，脸上顿时象挂了霜，待理不理的样子。那个口可是真难张啊，难说也得说啊。本来妹妹家中人口少劳力多家道殷实又刚卖了猪，却一口回绝了。桂芳听到妹妹亲口说出没钱的话，霎时感到明明是大白天的天仿佛一下子变黑了，本来就体弱多病加上失望的打击简直要虚脱了，也不知是怎么走出了妹妹家的门。桂芳在往家走的路上朦朦胧胧想到老吴有个远房的叔伯弟弟，过去老吴当书记时两家走动十分亲热，便向他家走去，可一想到那兄弟媳妇，便又有些心冷意怯，脚步越发显的沉重
这几年，桂芳的耳朵里几乎灌满了村里人对她家的议论，就是太穷了，夏天已经是七、八岁的男孩子只好光着屁股，冬天则勉强穿着打满补丁还露着棉花的破旧棉衣，好歹让小女儿穿戴齐整些，炕上是又脏又破芦苇编织散了花露出炕土的炕席，屋角的炕柜上胡乱码放着破旧被褥，柜门敞开着，里面乱糟糟地堆着破旧衣物，调皮的孩子吊在柜门上打秋千，有邻居的老太