《
汉书外戚传 》《
汉书武帝纪》记载：年轻时，许广汉担任昌邑哀王
刘髆的侍从官。后元二年（前87年）2月，跟随昌邑王
刘贺一起去长安朝见汉武帝。汉武帝从长安到
甘泉宫，许广汉是随驾人员之一，误取别人的马鞍放到自己的马背上，事情发觉后，执法者将其定为盗窃，当处死刑，有诏令死刑犯可以选
宫刑，于是许广汉便做了
宦者丞。
始元七年（公元前80年），
上官桀谋反，许广汉参与搜索部分罪犯。上官桀在宫中的公馆内有绳索，长有数尺，可用以捆绑人的有数千根，用箱柜封存着，许广汉搜索未得，其他官吏却搜索到了，许广汉因搜捕不力，犯罪判刑，送到
掖庭听差，后来做了暴室
啬夫。
当时，汉武帝的曾孙
刘询寄养于掖庭，号称“皇曾孙”，与许广汉住在同一官署。
掖庭令张贺原本是刘询的祖父
戾太子刘据的家吏，刘据被诬害时，张贺也受了宫刑，以旧日恩情对刘询十分照顾。等到刘询长大，张贺想把自己孙女嫁给他。这时，汉昭帝已成年，身高八尺二寸。张贺的弟弟
张安世是右将军，与
霍光同心辅政，听到张贺称赞刘询并想把孙女许配给他，
张安世怒道：“皇曾孙是罪人卫太子的后代，有幸能得到一个平民衣食就算不错了。不要再谈把女儿嫁给他的事”。于是，张贺不再提此事。
当时，许广汉的女儿
许平君年十四五，已许给内者令
欧侯氏为儿媳，正拟出嫁时，欧侯氏的儿子去世。许平君的母亲带她去
问卜，卜者说是她有大贵人之兆，其母内心高兴。张贺听说许广汉有女，就设宴相邀，酒兴浓时，就说：“皇曾孙是皇帝的近亲，即使地位卑贱，也可能当
关内侯，可以择其为婿。”许广汉便同意。次日，许广汉之妻听说后，很生气。许广汉请人作媒说合，才同意嫁给刘询。
元凤六年（公元前75年），许平君和刘询成婚。
元平元年（公元前74年），许平君生下儿子
刘奭。
元平元年（前74年）四月，汉昭帝
刘弗陵去世，无子。大将军
霍光按照血统，拥立汉昭帝的侄子昌邑王
刘贺为帝。刘贺继位后，荒淫无道，仅在位二十七天便被废黜。之后，霍光将刘询过继给昭帝为嗣，并拥立刘询为帝，是为
汉宣帝。
当时，霍光之女
霍成君还未许人，众臣为了讨好霍光和
上官太后，都推荐立其女为后。皇帝看到他们上的奏章后，说“求微时故剑”（即结发妻子），大臣们领会皇上的意思，遂寻
许平君入朝，封为
婕妤。同年，汉宣帝册立许平君为皇后。许平君成为皇后之后，霍光认为许平君的父亲许广汉犯过罪，不应该封为国丈，一年多以后才封为
昌成县君。
本始三年（公元前71年），许广汉的女儿许平君再度怀孕，将要分娩时有病。霍光的夫人
霍显（姓氏不详，名显，因是霍光夫人故称霍显）想让自己的女儿
霍成君成为皇后，于是派女医
淳于衍毒死许平君。
地节三年（公元前67年），汉宣帝与许平君之子
刘奭册立为皇太子，册封刘奭外祖父许广汉为
平恩县侯，地位特殊。
神爵元年（公元前61年），许广汉去世，谥号为戴（爱民如治/典礼不愆曰戴），葬于
杜陵（汉宣帝的陵园）南园旁。置园邑三百家，长丞按规定奉守。许广汉无子，过继许延寿次子
许嘉为平恩侯，奉许广汉之祀，出任担任大司马、车骑将军。
元康三年（公元前63年），汉宣帝册封许广汉的两个弟弟
许舜为博望侯，
许延寿为乐成侯。许氏封侯的共三人。
汉宣帝任命
许延寿为大司马、车骑将军，辅弼朝政。汉元帝继位后，于是，许氏家族与
金日磾家族、
张汤家族、
史恭家族合称“
金张许史”，成为西汉后期四大豪门。