1791年8月，法国方面有消息说约翰·拜伦已经自杀身亡。他在遗嘱上指定他的儿子——乔治·戈登·拜伦为他的财产继承人以及债务和丧葬费的负责人。
这个消息经过证实后，差不多整条街的人都听得到凯瑟琳的哭声。这时，拜伦才三岁，后来他在写给朋友的信上说：
我对我母亲还留有深刻的印象，而且，因为亲眼目睹了父母的婚姻状况，我从小就对婚姻产生了恐惧感！
安葬了约翰·拜伦之后，凯瑟琳强打精神，好不容易用她那微薄的一点收入，在相对条件好一点的住宅区安顿下来。她牺牲了自己的一切享受，只想让自己的儿子得到最好的照顾。可是，无论她如何委屈自己，以她的收入，决不可能送拜伦到一所贵族学校去，所以，拜伦只好在邻近的一所又小又吵又脏的学校读书。拜伦后来回忆他的这段生活时说：
我在那所学校什么也没有学到，只会重复地背诵一句：“神创造世人，我们要爱他！”第二年学校换了一位比较好的老师，我才学到一点东西，并开始学习拉丁文。
拜伦六岁的时候，一个意外改变了他的命运。“疯狂的拜伦男爵”，即拜伦的叔祖父的孙子在科西嘉岛不幸身亡，拜伦被指定为他的合法继承人。凯瑟琳终于可以在娘家和贵族亲友面前抬起头来了，她开始教导拜伦贵族人士应有的态度和礼仪。