听闻这个消息的刘秀立刻意识到，此时如果部队内部发生火并，一定会对士气产生巨大的影响。而且无论谁输谁嬴，对于天下所有想要推翻王莽统治的起义军的决心也是一个重大的削弱。刘秀知道，现在之所以能够连续取得几场还算不错的战果，是因为他们刚刚起事，士气正盛。而且所攻占和击杀的也只是新朝的几座小县城和部分地方戍卫部队。他们还没有与王莽的新朝正规部队打过照面，若是此时祸起萧墙，那最终渔翁得利的一定是王莽的新军。
于是刘秀发挥大无谓精神，号召所有舂陵军的将士们将之前所分得的战利品悉数拿出来，全部重新分配给绿林军所部。顿时便将这场还未爆发的内部危机消弥于无形之中。舂陵军将士主要以南阳刘氏宗族成员为主，本来就是因为心怀着远大理想才打出造反大旗的，而且个个都是知书达理的士家子弟，眼界颇高，为了全局考虑，损失一两次的战利品对于他们来说可以并不在意。而绿林军所部则因为能够分配到更多的战利品，得偿所愿，自然也就打消了之前火并的念头。
刘秀这简单的一出手，便展示了自己的手腕，让出现裂痕的双方重新言归于好，皆大欢喜，使得双方又可以将目标转向共同的敌人——王莽了。
此时，南阳郡的新朝正规部队已经对刘縯的造反做出了反应。就在刘縯的部队攻下了棘阳县并准备向南阳郡的治所宛城进军的时候，在小长安聚，遇上了由前队大夫甄阜和属正梁丘赐率领的新军。
这一日，天降大雾。
刘縯现在所指挥的这支部队中，成分相对比较复杂。不仅有自己的宗族子弟所组成的舂陵军，有绿林军所部的平林兵、新市兵，另外，还有不少的将士家属随军而行。由于部队的编制杂乱无章，人员龙蛇混杂，所以部队彼此之间的指挥调度也就很难做到统一。结果在这样的大雾天气中，他们于小长安聚突然遭到了新军的袭击，首尾不能相顾，一下子全军大乱，死伤无数。
混战中，刘秀也与部队走散了。就在他一人一马正在战场中疾驰，想要迅速脱离战团时，却在乱军之中恰巧遇到了自己的妹妹刘伯姬。刘伯姬一个小姑娘，哪里见过这种阵仗，此时正慌不择路地在战场中徘徊，刘秀连忙让刘伯姬上马，两人共骑一马，准备一起找路突围。可是骑了一会，他们又遇到了自己的二姐刘元以及她的三个女儿。刘秀本想招呼二姐一起上马，但刘元看着刘秀那瘦弱的战马，以及此刻骑在马上的弟弟妹妹，叹了口气说道：“你们快走，不用管我啦。如果再不走，可是一个都走不了啦。”此时，后方已经响起了新军追杀而来的声音。刘秀无奈，只得带着刘伯姬一起，迅速逃离了这里，并顺利地带着刘伯姬与大部队汇合，获得了安全。可怜刘元与她的三个女儿一起，最终没有能够逃出生天，被随后追赶而来的新军一并杀害于小长安聚。
小长安聚这一战，舂陵军损失惨重，光南阳郡的刘氏宗族兄弟就死了数十人。除了刘秀的二姐刘元和她的三个女儿之外，刘秀的二哥刘仲也在这场战役中阵亡。另外，他们的叔父刘良的妻子以及两个儿子也在这场战役中遇害。
也许是二儿子刘仲和二女儿刘元的死刺激到了刘秀的母亲樊娴都，她也在不久之后因病过世。此时刘縯与刘秀正在打仗，虽然内心无比悲痛，但紧迫的战局令他们无暇治丧，为了让兄弟二人后顾无忧，樊家派出了宗人樊巨公收敛了樊娴都。
兵败之后的刘縯只得暂时带兵退保棘阳县。而获得了胜利的新军则开始肆无忌惮地对各地起义者的家人进行清算。刚刚丧妻失女的刘秀二姐夫邓晨再度收获噩耗。在他的老家新野县，县令下令将邓家祖屋拆毁，并且放火焚烧邓家祖坟。跟着邓晨一起参与起义的邓氏族人都纷纷责怪邓晨，说咱们邓家本来就是县里的富户，日子过得殷实且富足，如今却放着好端端的安生日子不过，非要跟着妻子的娘家人造反，结果弄得现在不仅家破人亡，而且祸及祖先，简直就是造孽啊。然而，即便遭受如此巨大的打击，邓晨也丝毫没有后悔，依旧坚定了决心跟着刘縯、刘秀兄弟，要与王莽死磕到底。
甄阜和梁丘赐乘胜进军，他们将辎重全部留在蓝乡，率领十万精兵，轻装简行，南渡黄淳水，进抵沘水。并在两河之间扎下营寨，然后拆毁桥梁以绝后路。表示他们的决心就犹如楚霸王破釜沉舟进行巨鹿之战时一般，不将刘縯所率领的起义军全部消灭誓不罢休。
刚刚遭受惨败，此刻又见新军大军逼近，绿林军所部的新市兵和平林兵率先慌了。面对此情此景，本来就没有远大理想和抱负的他们，立刻打消了早先不久刚刚建立起的，要创造一番宏图伟业的心愿。一门心思地就是想赶紧跑路，现在跑说不定还能留得一线生机，继续之前打家劫舍的日子。虽然日子过得寒碜了点，但好歹可以继续活着呀。
绿林军所部军心的动摇，刘縯自然看在眼里，急在心里。正在他愁眉不展苦思良策的时候，突然听说绿林军的另一支分支部队——下江兵正在离此不远的宜秋聚附近活动，虽然数量不多，只有五千余人，但如果能够争取到他们加盟，不啻于对着此刻虚弱不堪的本方军队打了一计强心针，对于稳定军心十分重要。
既然打定了主意，刘縯也不多做停留。毕竟此时形势紧迫，刻不容缓。他立即带着刘秀和李通一起出发，前往下江兵的军营进行游说。
下江兵由王常、成丹、张卬三人共同领导。当听说舂陵军的老大刘縯前来拜访，并表示想要见见你们下江兵的话事人，共商大事时。三人连忙紧急开了个小会，并在会上决定共同推举三人之中文化程度最高的王常出面，代表下江兵接见与刘縯。
王常字颜卿，是颍川郡舞阳县人。因为替弟弟报仇杀了人，为躲避官府的追捕，所以逃亡到了江夏郡隐姓埋名。之后天下大乱，王常觉得终于找到了能够收容自己的组织，便毫不犹豫地加入到了绿林军中。在绿林山疫病发生后，又与和自己成分差不多的成丹、张卬一起组成绿林军分部之一的下江兵，前往南郡蓝口方面开展抢劫大业。随后经过各种辗转，如今在机缘巧合之下恰巧出现在了此处。也算是天意使然。
刘縯将双方若是能够联合，就有机会取得什么样的好处，未来还会有什么样的发展等等向王常声情并茂地讲解了一番。面对眉飞色舞、滔滔不绝的刘縯，从未被人画过如此大饼的王常不由自主地亮起了心心眼，成功地被眼前这位刘縯的风度气质所折服，成为了他的一个小迷弟。王常心想，若是能够跟着这么一个有魅力的大哥，他王常就算是死，也算是不枉此生了。
眼见王常已经被自己随意散发的魅力所征服，刘縯也是再接再厉，胸脯一拍，说道：“如果将来能够成就大事，大家分肉的时候我一定不会忘了给你分块最大的。”
得到了刘縯画的大饼，王常立刻把自己想要跟着刘縯一起混的想法分享给了成丹和张卬二人。然而成丹和张卬二人显然是没什么眼力见的，他们自恃自己人多势众，说道：“大丈夫既然起兵造反，当然是要由自己当老大，怎么能够屈居人下受人调遣呢。”
王常既然已经心属刘縯，当然不能跟成丹、张卬一般见识，得到了升华的他继续游说道：“汉成帝和汉哀帝都是由于没有自己的子嗣，所以才让王莽钻了空子，篡夺了汉室的天下。然而在得到天下之后，王莽却政令苛酷，致使百姓离心。如今天下人心向汉，已经不是一天两天的事情了，我们也正是因此，才有机会因势而起，成为一方老大。民众所怨恨的，就是老天要抛弃的；民众所思念的，就是老天要给予的。想要成就大事，一定要上合天意，下顺民心。如果只是仗着自己人多势众就想要肆意妄为，即便侥幸暂时拥有了天下，也会很快失去。想想当年的秦始皇和楚霸王，那是何等的牛逼，就连他们也没有能够长久的占有天下。更何况像我们这样布衣百姓出生，在草莽中啸聚山林的土匪头子呢。如果一定要执意如此，早晚会自取灭亡。如今南阳郡的刘氏宗族带头起兵反莽，我观察今日来与我谈判的这个人乃是人中龙凤，王公之才，将来必能成就大事，如果今日能够与他们联合，乃是上天带给我们的幸运啊。”
一番慷慨成词说得成丹与张卬张口结舌，目瞪口呆。虽然他们读书少，见识短，对于王常刚刚一番话里的许多道理可能都不是太明白，但是他们向来对于王常这个文化程度至少达到小学毕业水平的人还是十分的尊敬的。既然他们之中文化程度最高的王常都这么铁了心的想要与对方联合，同时又把对方的主将夸得天花乱坠，云里雾里的，也许联合之后真的会给他们带来许多好处也说不定。于是二人说道：“若是没有王将军这醍醐贯顶的一席话，我等几乎陷于不义之中。既然你已经决定联合，那我们就都听你的吧。”
刚刚经历了一场惨败的刘縯军，至此迎来了一丝转机。