忠臣内讧？种师道几乎死于李纲之手！且看秦桧毒计的威力！

岳飞一共有五子一女，前妻刘氏生岳雲、岳雷，后妻李氏生岳霖、岳震、岳霭，另有女儿岳安娘。
岳飞遇害后，其长子岳雲也被处死，其余家属都被判处流放。当时岳雲23岁，次子岳雷16岁，都已经成家，并有子女。三子岳霖12岁，四子岳震7岁，幼子岳霭只有3岁，比自己的侄子、岳雲长子岳甫还要小一岁。

岳飞曾经率军驻守庐山脚下的江州（今九江市），将家人和江北的难民都安置在此，今庐山下有岳飞家园遗址。

噩耗传来，家人带着年幼的岳震和岳霭秘密渡过长江，来到江北的黄梅县，改姓鄂，潜居于此。李夫人带着岳雷、岳霖等被流放岭南，自此在岭南抚养子孙。

二十年后，宋孝宗为岳飞平反昭雪，岳震和岳霭这才恢复岳姓，孝宗将岳霭赐名岳霆。

四兄弟都被封官，岳霖后来官职最高，位至兵部侍郎、广东经略安抚使。岳霖与朱熹、张拭为友，着手搜集岳飞遗文，修编成书，未完成去世。其幼子岳珂完成遗命，撰有《金佗粹编》，为岳飞传记资料汇编。

岳雷并未担任武职，后任翰林院大学士，所谓“岳雷扫北”为演义小说。岳震、岳霆兄弟二人去世后，葬在黄梅县，至今黄梅县有岳家后裔。岳飞五子皆子嗣众多，后裔遍布全国。

李夫人名李娃，字孝娥，被封正德夫人、晋秦国夫人，在家中对岳云、岳雷视如己出，在军中帮助岳飞安抚将士家眷。平反后，她被复原封号，后加封楚国夫人。75岁的李夫人在九江病逝，生前遗嘱“终后葬庐山”，以陪伴岳母姚太夫人。

岳飞再婚，是因为他外出参军后，在老家的妻子刘氏留下两个儿子，离家改嫁了。后来刘氏嫁给了韩世忠军中的一位军官，岳飞此时是一方大帅，韩世忠让人转告岳飞：“传语岳宣抚，宣抚有结发之妻，见在此中嫁做一押队之妻，可差人来取之。”

岳飞没有答复韩世忠，不久这事宋高宗也知道了，或许问起，岳飞上奏说：“臣不自言，恐有弃妻之谤。”“履冰渡河之日，留臣妻侍老母，不期妻两经改嫁，臣切骨恨之，已差人送钱五百贯，以助其不足，恐天下不知其由也。”

岳珂为祖父岳飞编写《鄂王行实编年》时，考虑到刘氏改嫁两次是家丑，将其略过不提。岳飞身边有子岳雲，再娶李氏，造成了岳雲是养子的误传。岳雲是李夫人的养子，但是岳飞的亲生儿子。

岳飞女儿岳安娘生平事迹不详，丈夫名高祚。民间说岳飞有次女，因抱银瓶投井而死，被称岳银瓶，后世祭祀。清末学者俞樾写有《银瓶徵》考证，认为“银瓶之名，自宋以迄于今，历有纪载，则固不得以为无其人也。”