家庭出身对霍建华的影响，霍建华的家世使他受到比较好的熏陶，而且霍家男子崇尚勇武，霍建华虽然小时候身体不好，但是根据父母的安排，学习跆拳道。虽然家庭出身清白，但对霍建华在演艺圈的发展，其实有利有弊，因为他的祖父，在台湾工作期间，曾为打击本土黑社会，特别是残留在台湾（日本曾经占领）的日本帮而出生入死。得罪恶人较多，霍建华小时候曾经遭遇过严重车祸，到现在仍被怀疑是遭报复所致。台湾娱乐圈不清不楚的势力较为复杂，所以当霍建华在台湾娱乐圈被媒体集体打压的时候，他毅然在最当红的时候（他一年的接戏记录现在无人能破），放弃一切来到大陆，而且把原从事司法工作的父亲（祖父已经故去）也接到大陆居住，他本人和父亲名下的房产基本都是在大陆，在台湾只有祖父留下的一套房子。因为大陆演出政策对台湾演员名额有限制，这对霍建华接戏构成一定困难，他曾经咨询怎么才能取得大陆的定居身份，通过缴税和社会保险等获得工作上的同等待遇，但没有相关政策。所以他的身份依旧是台湾演员，也属于外来务工人员的一类，为了工作在大陆注册有自己的工作室，叫做华杰工作室，员工连带他一共三、四人，属于依法纳税的超微小企业。他非常勇敢地背井离乡，在他乡立足发展，但其中也有反把他乡认故乡的悲凉。
2004年4月接下第一部古装武侠剧《天下第一》，饰演痴情孤傲的“地字第一号”密探——归海一刀，并演唱主题曲《你的第一》。2015年该剧在内地播出后，“归海一刀”受到观众喜爱，霍建华凭此剧迅速走入内地观众的视线，并开始在内地走红，成为霍建华演艺事业的一个重要转折点。2015年9月，出演都市偶像剧《屋顶上的绿宝石》，凭借此片中的表现获得新浪第三季电视男演员候选。霍建华本人表示，《屋》是自己演艺事业的分水岭，这部戏以及周念中这个角色给了自己很多，让自己十分难忘。
霍建华爷爷叫霍维泗。出生于中国山东龙口市北马镇霍家村。早年追随过孙中山先生，老蒋时期在青岛、福建、广东、海南等地法院工作过。49年10月，全家移到台湾生活。到了台湾，霍维泗也是从事法院工作，曾经升居高位，退休后是台湾响当当人物。霍建华爸爸叫霍兆琨。由于被父亲影响，霍肇琨也是一名法务人员。霍建华妈妈叫刘瑜。出生于河北省静海(现天津管辖)，与霍爸爸为同事关系。霍建华哥哥霍建元。一看名字，就知道这是兄弟，因为两人名字都带有霍建。霍建元目前是台湾台北市南港分局舊庄派出所所长，由于弟弟是知名艺人，他的关注度也蛮高的。