黄沔,公元991年,出生在修水县双井村。其高祖父黄玘、曾祖父黄赡,从浙江金华迁江西修水。曾祖父黄赡是南唐的著作郎,在分宁(今修水)当县令,退休后定居修水双井。伯祖父黄元绩,为南唐进士;祖父黄元吉为举人,经商置田,聚书万卷。其父亲黄中理,踵事增华,创办芝台书院和樱桃书院,亲自任教,并聘请名师,开放办学,成为当时修水,乃至江西省的著名书院,游学者常常数百年。黄沔自小在这两个书院读书,学业优秀,并在1015年,高中进士,一举成名天下知,为双井十龙之首,是双井黄氏家族的好榜样。在进士及第后到当官的这段空档期内,在芝台书院、樱桃书院,从事教学,协助父亲黄中理管理书院,制定黄氏书院的规章制度。