哈里森家族和李家族、伦道夫家族和卡特家族都有婚姻关系，这个家族源自1630年从英国来到美国的一位叫本杰明·哈里森的人。按照英国人的习惯，当爹的就连名带姓全传给儿子了，儿子小本杰明·哈里森更干脆，他的儿子叫本杰明·哈里森三世，孙子叫本杰明·哈里森四世，这个哈里森四世和华盛顿一样，靠着从军这条路进入了上流社会。成了上校后，哈里森四世娶了弗吉尼亚殖民地巨富罗伯特·卡特一世的长女安妮，生下来的
本杰明·哈里森五世就再也用不着再当兵去了，得以从
威廉与玛丽学院毕业，进入弗吉尼亚议会，又随着姐夫
佩顿·伦道夫去参加
大陆会议，在
独立宣言上签字，名列国父之一，1781年到1784年出任弗吉尼亚州州长。
威廉·哈里森是哈里森五世的幼子，典型的
门阀子弟，或者叫美国的太子党。