孝景四年，立栗太子，使魏其侯为太子傅。孝景七年，栗太子废，魏其数争不能得。魏其谢病，屏居蓝田南山之下数月，诸宾客辩士说之，莫能来。梁人高遂乃说魏其曰：“能富贵将军者，上也；能亲将军者，太后也。今将军傅太子，太子废而不能争；争不能得，又弗能死。自引谢病，拥赵女，屏间处而不朝。相提而论，是自明扬主上之过。有如两宫螫将军，则妻子毋类矣。”魏其侯然之，乃遂起，朝请如故。 　　桃侯免相，窦太后数言魏其侯。孝景帝曰：“太后岂以为臣有爱，不相魏其？魏其者，沾沾自喜耳，多易。难以为相，持重。”遂不用，用建陵侯卫绾为丞相。