林建岳与其前妻谢玲玲育有五个子女，分别是：
林心儿
林恬儿
林颢伊（原名林爱儿）
林效能
林孝贤
此外，林建岳还有一个女婿何正德。
这些子女中，林心儿和林恬儿是社交名媛，林颢伊则较为低调并有实干精神，曾担任香港青年联会主席。林孝能以新生的身份到清华大学读硕士。