李修贤于1952年8月6日出生在上海市,自小随父母迁居香港,由于家境贫寒,只能住在中下层地区。幼年的李修贤日日见到城寨里大小流氓横行霸道,心中颇有不平,很希望自己能够成为一名警官,整顿社会秩序。读到中学四年级,为了承担家用,李修贤不得不中途辍学。他想要投考警察学校,却被担心儿子安危的母亲坚决拦下,未能如愿。自此他流落社会打工谋生,做得最久的是安装铝窗的工人。
1970年,邵氏电影公司开设艺员训练班,李修贤报名成功,成为第一期学员。在训练班中李修贤遇到邵氏著名导演张彻等人,他被张彻相中而后与之签约。同年他从邵氏影片演员培训班毕业。青年时期的李修贤