曾祖父：黄润，清朝商人

曾祖母：钟氏，进士钟锠的孙女

祖父：黄学诗

祖母：李氏，翰林李象元的后裔

父亲：黄际升

母亲：梁氏，解元梁念祖的孙女

哥哥：黄鸿藻，清朝举人，曾任广西思恩府知府。

弟弟：黄翰藻，清朝清朝国子监典籍。

儿子：黄遵庚

侄子：黄遵宪，清朝诗人、外交家，曾任湖南省按察使。

侄子：黄遵楷，清朝举人，黄遵宪之弟，曾任知县。

侄子：黄遵涛，黄翰藻之子

孙女：黄春英，梅州女子师范学校首任校长

下市禄善堂黄氏仅十九世至廿三世有科名官职的人物151人，其中文进士一名（黄基），文举人九名（黄际虞、黄鸿藻、黄鸾藻、黄遵宪、黄遵楷、黄大鹏、黄俊、黄敬元、黄腾骧）。光“五代同堂”世家出了18位诗人。