没过多久，高力士因小过错，被鞭打后赶出宫，宦官高延福将他收养为养子。高延福曾在武三思府上侍候武三思，高力士自那时起常往来于武三思家的宅子。大约一年后，高力士又被召进宫中，得到武则天喜爱，并授官宫闱丞。

高力士在“神龙政变”后，逐渐与临淄王李隆基交往密切起来，在诛韦后，除太平公主的两次政变中，支持李隆基，时至今日，他终于走上了权力的高峰。

公元七三一年二月二十一日，高力士站在内侍省大门口，与金吾大将军程伯献正在谈话。

高力士说：“程兄，又到春季了，圣上自去年开始，每月都要组织两三次朝臣的春游活动，我怕有不法分子趁机扰乱治安。皇城内外，乃至整个长安城的治安，就有赖于你的管理了。”

程伯献向高力士行抱拳礼：“力士兄弟，我一直以来都是兢兢业业地维护皇城内外，乃至整个长安城的治安，请力士兄弟和皇上放心，只要有我程伯献负责治安，绝对不会出现什么问题。”

程伯献已经年逾花甲，披盔戴甲，看上去仍然一副老当益壮的样子。他是大唐开国将领程咬金的孙子。

高力士微笑着说：“有程兄这句话，我就放心了。”

程伯献说：“力士兄弟，少府监冯绍正与我们两人交情甚好，他昨天到我府上做客，说想与我和你结为异姓兄弟，不知你意下如何啊？”

高力士微笑着说：“好，很好。冯绍正为人很实在，他任少府监以来，农业技术，手工业制造业，铸造业等行业，都管理的井井有条。我就