人，但他并不气馁，仍然专心致志地把五师的架子给搭了出来。各师的第一批中层军官大都是从南汉各部中精锐抽调而来的，让他们作为老师来锻炼这些新募的士兵。如羽林军文硕、仇池军杨初、江州军桓宣、宁州军毛孟、豫州军田徽等人，这些百战之余的勇士，都被抽调至李矩麾下。
而与此同时，李矩又征辟任用了一批北来流民领袖，如平阳李洪、弘农王璃、河内阎罴、颍川李头、陈郡董瞻、河南刘瑞等数十人。这些人都是力能扛鼎的勇士，同时也是能识文断字的寒士，李矩对他们非常看重，一面提拔他们统军，一面又经常号召各部将领集中在一起讲武习史，传授自己在战事上的心得。
架子搭起来后，每隔一段时间，李矩就要在江夏安陆一带正式演练战阵。内容以诸葛八阵为主，命五师分为两军，一方攻，一方守，看看如何协同作战能够取得奇效，让将士们在训练中总结学习。
如此下来一年，虽然五师的人数仅仅只有两万，但无论是军容还是军风，都蔚为可观。一开始，大家因为这支军队由流民中招募而来，称之为流民军。但有一日江州都督王敦率军前来参与演武，发现江州军的军容不如这支流民军远甚，就嗟叹良久说：“天子无忧矣，有此军北上平贼，战则必胜，安有我用武之地？”
流民军的军官们听了非常得意，便开始自称为无忧军，可有人觉得这个称谓不够威风，又改称为安汉军。大家听了都很满意，说这个名字很好很有气魄，而李矩听到这个称谓，便想到了当年兄长自设的安乐旗，于是便上表天子，请求把安乐旗赐给流民军，刘羡欣然同意，于是安汉军这个称谓，也就从此确定了下来。
等到了启明六年时，安汉军从二万人扩张到了四万人，数量已经翻了一倍，即使还没有达到起初规划时的数量，但到了演练之时，已经称得上是规模浩大，呼声震天。在安陆操练人马时，阳光照射到将士们的甲胄上，闪耀精光一片，就好似光海一般铺天盖地，令人望而生畏。
其间军队的人才又获得了新一轮的扩张，刘羡将良将科中通过射策的人才，如周抚，毌丘奥，庞遗、王愆期等人安排进了安汉军，李矩又在中原招募到了新一批流民帅，甚至连投降于齐汉的蓬坞堡主陈午也有所耳闻，暗地里派其侄陈穿前来投靠李矩。
这使得安汉军的实力愈发强盛，虽然到目前为止，安汉军可谓是寸功未立，但内部已经是信心满满，跃跃欲试，急着用一场战事来检验两年练兵的成果了。
而眼下齐人入侵的这一场战事，显然就是安汉军出动的最好时机。
但这毕竟是练兵以来的第一场战事，李矩虽然对朝廷放出豪言壮语，但私下里还是非常谨慎。他先是召集了安汉军的中高层将领，开了一个简短的小会，说道：
“荆州乃是国家腹心之地，赋税、人马、衣食皆仰赖于此，而齐人如此肆虐，对民生多有损害。我等既在襄阳编练了两年之久，自是义不容辞，也是时候见见血了。”
“如今我军是主场作战，各种因素都有利于我，但千万不要轻敌。要知道，为了编练此军，我等要了朝廷不知多少财赀，若束手无策，必然大失民望，遭人讽刺，以后还如何见人？更别谈什么北定中原了。”
话音刚落，李矩打量部下颜色，见在场众人皆面色严肃，慨然应诺，他才默默点头，又道：“贼军分两路骑兵直捣我腹心之地，是想让我军顾此失彼，我军若集中兵力攻一路，则另一路遥为呼应，我军若分散兵力，想要同时围剿两军，则有心无力，白白浪费时间而已。”
“相较于前者，后者的损害更大，因此，我军还是要集中兵力，先灭其一。只要歼灭敌军一部，另一部自然也会胆寒，便会不攻自退。”
于是接下来的问题，便成了先进攻哪一路。
诸将多认为应该进攻西路的齐军，毕竟根据目前已知的军情，西路齐军已直插入襄阳与当阳之间的山林，与安汉军非常接近，若不赶快加以处理，他们恐怕能威胁到江陵。
而反观东路的齐军，则在汉东的安陆一带徘徊，那里地势平坦，经历数次大战之后，人口不如江汉地区稠密，且较为适合骑军纵横跑马，从影响和追击难度上来看，都不如先进攻西路的齐军。
但李矩不认同这个观点，他反而说服众将道：“西面乃巴山余脉，山势迂回形势难明，我军若贸然追逐其中，不仅可能白白绕弯，而且极其容易遇伏，不如命周遭百姓暂入县内，坚壁清野，封锁山道，敌军自然难以有所斩获。东面地势平坦，敌情却更加明了，他们是骑军，我军也有骑军，有水师相配合，反而更加容易取胜。”
至此，李矩再度上表朝廷，要求江州都督王敦移兵弋阳，提前封锁东路齐军流窜的去路，又调张光领兵固防随县，锁死齐军返回的退路，再派舟师提前在江畔监视齐人动向。要求各军坊准备烽火台，一旦遇到齐人袭击，便点燃烽火为讯。
一切准备就绪后，李矩在襄阳城南的岘山下进行点兵。晴朗的日空下，黑压压的军士站满了岘山山脚，柔和的秋风吹拂过人的发梢，让人觉得舒适温良，但他们的阵列没有丝毫松懈，却也没有初次出征的紧张。
李矩身着靛蓝色的突骑风帽，外披一件绛红色的大披风，在从骑的簇拥下走到列阵的最前面，座下的栗色骏马也披着马衣。他看见列阵时纹丝不动的将士，披甲背弓执戟，就好似刀刻的鬼神般，忍不住对左右赞叹道：“只要杀敌时也有这样的作风，天下何处不可去得？”
而此战的骑师先锋已经决定了，乃是江安之战后投靠汉军的前晋军猛将田徽，他向李矩拱手承诺道：“请元帅放心，我军等候多时，就是为了报答国恩！此战有胜无败，我必捉了齐人贼帅，让天下人知晓我军的威名！”