岳飞于有5子1女。五个儿子分别是：长子岳云、次子岳雷、三子岳霖、四子岳震、五子岳霆；一个女儿是：岳安娘。

1、长子岳云

岳云（1119—1142），字应祥，号会卿，刘氏生。 他12岁即从张宪军，随父亲征战四方，身先士卒，屡建奇功。后被诬入狱，与父和张宪同时被害，时年23岁。冤狱平反后，赠安远军承宣使。

2、次子岳雷

岳雷，字发祥，号夏卿，又号声甫，刘氏生。靖康元年（1126年）三月，生于山西平定军。岳飞在狱中时，岳雷曾被派去照料其父。父被害后，随亲人被遣送至惠州（今属广东省）拘管，还未等到父兄平反，便已在流放地含恨而终。 

3、三子岳霖

岳霖（1130—1192），字及时，号商卿，母李娃。岳飞遇害时，霖年仅12岁，孝宗皇帝昭雪时，霖32岁。官至朝请大夫、敷文阁待制，赠大中大夫。

4、四子岳震

岳震，字东卿，母李娃。父兄蒙冤遇害，震方7岁，随母流放。曾任朝奉大夫、提举江南东路常平茶盐公事。 

5、五子岳霆

岳霆，李娃生，初名岳霭，宋孝宗为之改名岳霆，字应时，号君锡。父兄遇害时才3岁，随母流放。后任修武郎、閤门祗候、奉直大夫。

6、长女岳安娘

岳安娘，其夫高祚于隆兴元年（1163年）特补承信郎，后事不详。

另外在民间相传岳飞还有一个女儿叫岳银瓶。“银瓶”之称见词人周密《癸辛杂识》，其事迹并见《说岳全传》等的文学演绎。清末学者俞樾认为岳银瓶的确存在，有《银瓶徵》一文加以考证，但因宋代《鄂国金佗稡编》无载，故也有观点主张她是虚构人物。