临淮王元彧、安丰王元延明，率领百官，封锁宫中仓库，准备天子车驾迎接元颢。丙子日，元颢进入洛阳宫，改年号为“建武”，大赦天下。任命陈庆之为侍中、车骑大将军，加封食邑万户。杨椿在洛阳，他的弟弟杨顺担任冀州刺史，哥哥的儿子杨侃担任北中郎将，跟随北魏王在黄河以北。元颢忌惮杨椿，但是因为杨家家世显赫，怕失去人心，所以不敢杀他。有人劝杨椿逃亡，杨椿说：“我家内外加起来有一百口人，藏到哪里去？就坐等着上天安排吧。”
上党王元天穆等人率领四万大军攻占大梁城，派费穆分出两万士兵攻打虎牢关，元颢派陈庆之去攻打费穆。元天穆惧怕元颢，打算向北渡过黄河，对行台郎中济阴人温子升说：“你是想去洛阳，还是想跟随我北渡黄河？”温子升说：“魏王因为虎牢关失守，才导致如此狼狈。元颢刚刚登基，人心都没有安定，如今我们前去攻打，不会打不赢的。大王您平定了京城，再恭迎魏王大驾降临，这是堪比齐桓公、晋文公的壮举啊。你舍弃这么好的机会却要北渡黄河，我私下里真是替您惋惜。”元天穆认为温子升的意见很好，却不予采纳，于是率兵渡过黄河。费穆攻打虎牢关，即将攻克，听说元天穆北渡黄河，自认为没有后继部队，于是向陈庆之投降。陈庆之进攻大梁城、梁国城，全部攻克，陈庆之凭借几千名士兵，从铚县出发一直到洛阳，攻占三十二座城池，历经四十七场战争，战无不胜。