晋阳城其实早就丢了，只是因为战争，河东、关中通信中断，隋军也有意识地阻隔信息的传递，消息才这么晚送到长安。
自李渊晋阳起兵，到兵入长安，共计三个多月，可谓是兵贵神速。但这三个多月，黄明远也没有闲着。
十一月十八日，也就是李渊誓师南下的第三日，刘云芳占领马邑郡治善阳县。
十二月二十日，也就是李渊刚攻克霍邑不久，正率军围攻蒲坂，一直在雁门郡等待了一个月的刘元芳便率领虎威卫和五千代北兵南下。而与此同时，严孝武组织上党、长平两郡人马约万余人马，也同时往北进攻，准备合围晋阳。
之前黄明远命诸部不动，自然让李渊大摇大摆地南下，一路无所阻挡。但现在黄明远命令诸将行动起来，河东各郡蛰伏的黄明远旧部，立刻举旗响应起来。
十几年的时间，除了黄明远本人，没人知道在河东大地上到底谁是他的人。可能是地方诸侯，也可能是一城小吏。
刘云芳南下所部，连战连捷，几乎没有什么阻挡，便占领汾阳（今山西阳曲东北），直奔晋阳而来。
此时负责镇守太原的李元吉还浑然不觉。
李渊南下，留下李元吉、窦诞、刘政会、宇文歆等人镇守太原。其中刘政会、宇文歆二人是文官，兵权尽掌握在李元吉、窦诞二人手中。二人一为李渊的儿子，一为李渊的女婿，皆是纨绔之辈。
李元吉为人骁勇，但性格猜鸷骄侈，虽然不像史书说得那般，生下来的时候连他娘窦氏都厌恶他的长相，将他丢弃，但他残忍骄狂，却是真的。
李渊离开太原之后，才十四五的李元吉便成了脱缰的野马，再无人能管束的了他。至于刘政会、宇文歆，本就是李元吉的下属，虽然受李渊之命，主持太原郡政事，但毕竟尊卑有别，如何能约束的了李元吉。
于是李元吉纵情声色，肆意妄为起来。
李元吉这个人很骁勇，擅长马槊，其勇武在诸兄弟中排第一。他喜欢打猎，一日不打猎便难受。因此自领太原留守后，便每日沉浸到打猎之中，装载罗网的车子就有三十多辆。
长史宇文歆劝谏李元吉，不要懈怠政务，沉湎于游乐。
李元吉却是不以为然道：“本公是宁可三天不吃东西，不能一天不打猎。你不让我打猎，岂不是要我的命。”根本不听劝告。
李元吉耽于享乐，身边自然集结了一群狗腿子。这群人跟着李元吉，无恶不作，平日里便在大街上抢掠财务，打猎时更是以人为猎物取乐，太原百姓苦不堪言。
李渊离开才半个多月，关于李元吉的恶行就集了一箩筐。
宇文歆为人刚直，见此很是不满，就向刘政会抱怨道：“今姑臧公自领留守后，便常微服出城，又和窦诞一起游乐打猎，蹂践谷稼，放纵亲昵，公开掠夺百姓财物，境内六畜，因之殆尽。当衢而射，观人避箭以为笑乐。分遣左右，戏为攻战，至相击刺毁伤至死。夜开府门，宣淫他室······隋军近在咫尺，姑臧公尚不思守御，今太原百姓心中怨毒，各怀愤叹。我军以此守城，安能自保！”
刘政会听了也是无奈，这李元吉但凡有其兄长李建成和李世民二人一半的品性、能力，也不至于此。
刘政会只得安慰宇文歆，太原要地，城池坚固。等到唐公攻破长安，必遣得力之人守御。若是现在弹劾姑臧公，反而引得唐公不满。
李渊留他们是佐助李元吉的，不是管教李元吉的，这是两回事。
宇文歆也只得同意。