李志坚集中起来4门山炮和大部分迫击炮，对日军的冷炮就没有停过，只要发现日军的指挥机关、炮兵阵地和后勤阵地就想尽办法的进行冷炮轰炸。现在李志坚的教导旅中迫击炮的数量不少，除了按编制配备的外，还在对日军后勤线的打击过程中，缴获了不少日式迫击炮及弹药。
这种冷炮使得日军在几天后的作战中炮兵几乎不能放开手脚轰炸，隔上一会就要转移一下阵地，并且在炮兵阵地周围部署了不少的保卫部队，减弱了前线日军的攻击力量。指挥机关更是变得低调，日军的指挥官开始学习中国军队，很多军官也换上了士兵军装。
除了冷枪冷炮外，李志坚也寻找作战时机对第五师团一部开展了几次夜袭，而夜袭的主力就是掷弹筒，掷弹筒的射程太近，只有几百米，白天无法用来用打冷炮，李志坚就都用来进行夜袭。掷弹筒进行轰炸后全军突进，第五师团的士兵素质的确名不虚传，在遭遇夜袭的情况下，部队几乎没有混乱，反击时的射击还比较精准，所以夜袭部队虽然取得一定战果，但是都未能打出击溃战。
教导旅在对第五师团进行夜袭和冷炮冷枪等袭扰外，还分出两个营对日军的后勤线进行破袭，而这也是八路军最喜欢做的，两支部队经常就不谋而合，打了几次没有约定的合作作战，日军的后勤再难以送进来，日军无奈，只能向忻口前线增兵，日本从本土在源源不断的向中国增兵，虽然现在主要增兵方向是淞沪方向，不过兼顾了中国北方，也增派了一些兵力，这次日军又增加了一个支队支援，同时为后勤运输进行护送，这样才给第五师团补充了一些物资，否则第五师团马上就得撤兵。
两个营的兵力对于日军一个支队的护送部队而言，无疑是鸡蛋对石头，部队不敢继续对日军大军护送的辎重继续袭扰，于是将袭扰的对象转变为日军已经占领的晋北的县城，日军的主力都在进攻忻口前线，在这些县城根本没法留下多少力量，所以教导旅区区两个营，竟然很容易的就收复了繁峙、广灵等县城。
李志坚将收复上述县城的情况上报给阎锡山后，阎锡山指示由李志坚自己安排部队守卫，并授予李志坚自主任命这些县的临时长官的权力。于是李志坚安排收复这些县城的部队，在本地招收了一些青年，使用缴获的日军装备进行武装，每个县留下一个排，由他们带领在本地招募士兵在县城周围进行游击。
