曹宗先祖是汉朝的开国功臣、平阳懿侯曹参。曹参与刘邦南征北战,而后为汉惠帝相国,为西汉政权的稳固做了极大的贡献。
其父曹襄,为汉武帝长姊——长公主平阳公主和平阳侯曹时之子,迎娶汉武帝女卫长公主。
元鼎二年,曹宗袭爵,是为第六代平阳侯。
征和二年,巫蛊祸起,曹宗定罪与中人奸、擅自闯入宫门,本是死罪,曹宗用财赎罪而失侯,刑罚为完刑,为城旦。当时平阳邑户数高达二万三千。
巫蛊之祸多为冤案,曹宗之舅、卫太子刘据便曾被宦官常融诬陷。起兵自保后,被宦官诬陷谋反。曹宗与宦官有所来往,或许本欲图培植宦官帮助太子免受谗言,却不料被诬陷“与中人奸”,反被算计丢失侯位,使得太子刘据再次失去外家护侍。