六年，迁封不其侯，食邑三千六百户，遣就国。后南阳太守杜诗上疏荐举伏湛说：“臣听说唐尧、虞舜亲如股肱因此社稷康盛，周文王以人才鼎盛而得安宁，所以《诗》称‘济济多士’，《书》曰‘股肱良哉’。臣杜诗见故大司徒阳都侯伏湛，自十五岁而志于学，未尝有所毁缺，笃信好学，守死善道，论经学堪为人师，论行为堪为仪表。前在河内朝歌及居平原，官吏百姓畏爱，以他为楷模而仿效他。遇到时局反覆，兵凶连年，而伏湛能秉节义持操守，有不可夺的志气。

陛下深知其能，授以宰相重任，众贤百姓，仰望德义。后以微小过失免退，久不复用，有识之士感到痛惜，儒生士子感到伤心，臣私下为之惋惜。伏湛容貌堂堂，智略谋虑，朝廷的集大成者。从童子立志，至白首而矢志不衰。行动足以向导王室，名气足以光示远人。古时选拔诸侯以为公卿，所以四方回首，仰望京师。

柱石之臣，应居辅弼之位，出入宫廷以补救缺漏纠正过失。臣杜诗愚戆，不足以知宰相之才，我只怀有区区小才，敢不尽忠竭力。臣前为侍御史，呈上密封奏章，讲伏湛公正廉明爱护部下，好恶分明，世代儒学，素持声名信誉，能晓经术，修养德行，通达国家大政，尤其应该作为近臣，纳言于左右，按旧制九州共选五人以任尚书，令则一郡有二人，可以伏湛代一人。颇引来执事们的非议。但臣杜诗蒙恩深厚，所言只要有利于国，虽死无恨，所以再次越职触冒上奏。”

建武十三年(37)夏，征召还朝，令尚书选择日期以封拜官职，还没有就位，因召见赐宴中暑，病逝。赐棺材，帝亲往吊唁，派遣使者送丧修筑墓室。