魏征回答说：“陛下功劳虽高，而人民还没有得到实惠；恩德虽厚，而泽惠还没有广泛施行；国家虽安，而百姓还不算富裕；四夷虽服，而他们的要求还不能满足；祥瑞虽来，而不好的兆头还很多；年岁虽丰，而仓库还很空虚。这就是我认为不能封禅的原因。”
太宗憋了一肚子气，面子上也感到非常难堪，便宣布退朝。群臣们也认为魏征这个人不知道进退。魏征心想，太宗一走，事情就不好办了，于是，他立即站起来说：“陛下请留步，让我把话说完。”魏征考虑，这样的进谏，效果不会好，要阻止这件事，必须另换一个角度来说。于是，魏征说：“愿陛下让我做良臣，不要让我做忠臣。”李世民问道：“良臣与忠臣怎么区别？”魏征说：“良臣自己身获美誉，君主声名显赫，富贵传之子孙，福禄无疆，如稷、契等人；忠臣就不同了，自己身受诛戮，君主蒙受恶名，家和国同时丧败，如比干等人。”李世民说：“那我让你做良臣。”魏征说：“事实上，现在陛下盛怒，臣冒死进谏，这是让我做忠臣啊！”太宗的气色缓和了一些。
魏征继续进谏说：“陛下虽有这六个方面的优越条件，但我认为泰山封禅劳民伤财，于国家和人民没有益处。就拿隋炀帝杨广巡幸江都的事情来说吧，他三次坐着豪华龙舟到江都游玩，王公、妃子、僧尼、道士乘坐几千艘豪华富丽的大船，首尾相连2万多里，随从10万人，光拉纤的壮丁就有8万多人，还有大队骑兵夹岸护送。船上的人纵酒寻乐，声闻数十里。沿途500里内的老百姓，都要贡献美食。巡游的队伍像蝗虫一样，把沿途农民弄得倾家荡产，啃树皮，嚼草根，甚至被逼得人吃人。于是，王薄振臂一呼，响应者数10万，起义的烽火迅速燃遍大江南北。试问这样的巡幸有什么好处？”