时祖拜舞人安叱为散骑常侍，纲上疏谏曰：“谨案《周礼》，均工、乐胥不得预于仕伍。虽复才如野，妙等师襄，皆终继，不易其业。故魏武使祢衡击鼓，衡先解朝服，而击之，云不敢以先王法服为伶人之衣。虽齐纬封曹妙达为王，授安驹为开府，既招议，大絜彝，有国有家者以为殷鉴。方今新定天下，开太平之基。起义功臣，行赏未遍；才硕学，犹滞草莱。而先令舞胡，致位五品；鸣玉曳组，趋驰廊庙，顾非创业垂统贻厥孙之也。”祖不纳。寻令参详律令。

，王之过失，悉以闻奏。且父之际，人所难言，歆言之，岂非忠恳？今诛罪，不录其心，臣愚窃以为过。”翌日，祖召纲，升御坐谓曰：“今我有公，遂使刑罚不滥。元吉自恶，结怨于人。歆既曾以表闻，诞亦焉能制禁？”

贞观四年，拜太少师。时纲有脚疾，不堪践履，太宗特赐步舆，令纲乘至阁下，数引禁中，问以政。又令舆东，皇太引上殿，亲拜之。纲于是陈君臣父之、问寝视膳之方，理顺辞直，听者忘倦。太每亲政事，太宗必令纲及左仆房玄龄、侍中王珪侍坐。太尝商略古来君臣名教竭忠尽节之事，纲凛然曰：“托六尺之孤，寄百里之命，古人以为难，纲以为易。”每吐论发言，皆辞慷慨，有不可夺之志。及遇疾，太宗遣尚书左仆房玄龄诣宅存问，赐绢二百匹。五年卒，年八十五。赠开府仪同三司，谥曰贞。太为之立碑。初，周齐王宪女孀居孑立，纲自以齐王故吏，赡恤甚厚。及纲卒，其女被发号哭，如丧所生焉。

少植，隋武郡同功书佐，先纲卒。少植安仁，永徽中为太左庶。属太被废，归于陈邸，僚皆逃散，无敢辞送者，安仁独涕泣拜辞而去，朝野义之。后卒于恒州刺史。

纲在东，隐太建成初甚礼遇。建成常往温汤，纲时以疾不从。有生鱼于建成者，将召饔人作鲙。时唐俭、赵元楷在座，各自赞能为鲙，建成从之，既而谓曰：“飞刀鲙鲤，调和鼎，公实有之；至于审谕弼谐，固属于李纲矣。”于是遣使送绢二百匹以遗之。建成后渐狎无行之徒，有猜忌之谋，不可谏止。又思筮者之言，频乞骸骨。祖漫骂之曰：“卿为潘仁长史，何乃羞为朕尚书？且建成在东，遣卿辅导，何为屡致辞乎？”纲顿首陈谢曰：“潘仁，贼也，诚在杀害，每谏便止，所活极多，为其长史，故得无愧。陛下功成业泰，颇自矜伐，臣以凡劣，才乖元凯，所言如投石，安敢久为尚书？兼以愚臣事太，所怀鄙见，复不探纳，既无补益，所以请退。”祖谢曰：“知公直士，勉弼我儿。”于是擢拜太少保，尚书、詹事并如故。纲又上书谏太曰：“纲耄矣，日过时，坟树已拱，幸未就土，许傅圣躬，无以酬恩，请效愚直，伏愿殿下详之。窃见饮酒过多，诚非养生之术。且凡为人者，务于孝友，以君父之心，不宜听受邪言，妄生猜忌。”建成览书不怿，而所为如故。纲以数言事忤太旨，既不行，郁郁不得志。武德二年，以老表辞职，优诏解尚书，仍为太少保。祖以纲隋代名臣，甚加优礼，每手敕未尝称名，其见重如此。