程学启去世之后，李鸿章让他手下将领王永胜、刘士奇分别率领程学启的部队去和郭松林在福山镇会师，从福山镇进攻沙山，经过接连几天的战斗，占领了沙山。到了三河口，消灭了两万人。于是李鸿章督促各部队合作，一起围剿常州。刘铭传攻打西北部，成功攻破；郭松林攻打陈桥渡的军营，成功攻破；张树声、周盛波、郑国櫆等人袭击河边敌人的军营二十几个，也都成功攻破。战败的敌军落荒而逃，想要回去进入常州城内，陈坤书拒绝他们进入，所以被政府官兵杀死在城下的敌军败兵数都数不过来了。三月二十二日的时候，李鸿章的军队正式进逼常州城，用大炮和炸药轰炸城墙，城墙被炸开了一个数十丈长的大口子，然后挑选了数百名勇士组成敢死队，战士们扛来梯子，登着梯子强行爬墙。陈坤书骁勇善战，他亲自率领强壮的士兵们出去战斗，驱赶他们，修补被轰开的缺口，政府官兵死了好几百人。李鸿章十分愤怒，督促众人要更加努力，命令多多准备攻城器材，接连好多天进行猛烈的攻击，两军的受创程度和人员死伤同样惨重。经过了十几天后，李鸿章亲自到战场去当督军，刘铭传、郭松林、刘士奇、王永胜这些人，身先士卒，亲自出战，拼死搏斗，登上了城楼，敌人终于乱了阵脚。陈坤书依然不屈服，和他手下的将领费天将一起率领那些剽悍的士兵，和政府官兵展开激烈的巷战，郭松林浴血奋战，俘虏了陈坤书，费天将也被周盛波抓住了。刘铭传大声喊着“只要放下兵器，过来投降的人可以被赦免”，听到这话，立刻有一万多人投降。在本次战斗中政府的军队也死了几千人。常州就这样被收复了，当时是四月六日。从这以后，江苏的军队（李鸿章的军队）和南京的军队（曾国藩的军队）之间的联络全部畅通了，在江苏全省范围内，除了南京府，没有敌人活动的踪迹了。自从同治元年壬戌春天的二月，李鸿章率领着八千人抵达上海，正式开始统领淮军，还有常胜军，转战各个地方，经历了大大小小的战斗有几十次，从松江保卫战开始，一直到嘉兴、常州攻坚战结束，一共整整两年，到了同治三年甲子夏天的四月，扫清苏南太平军的任务大功告成。

说明：李鸿章扫清苏南地区的太平军，是靠着淮军将士们骁勇善战、意志坚韧，还有华尔、戈登也贡献了很大力量，而不是只依靠常胜军打下了几座城池，打赢了几次战斗。当时李秀成论智慧、论勇气都是数一数二的，他的军队大多使用西方的枪支和大炮，程学启、刘铭传、郭松林、周盛波、张树声、潘鼎新这些将领虽然善战，但却只依靠天生的勇气和谋略，而不知道新式作战方法的作用，所以淮军在战争初期的时候，和敌人的军队相遇，常常被敌人打败。李鸿章从中吸取教训，命令那些将领也向常胜军学习，也用了不少常胜军用过的武器。要说左宗棠平定浙江太平军的功劳，还得到了法国军官托格比、吉格尔这些人的很多帮助。这个朝廷要灭亡了而又起死回生，英国人、法国人有很大的功劳。他们的意思是，想要永远保持东亚和平的局势，把这里建设成为商务活动的乐园，但是没想到一直到今天，中国还不想着自我振兴，将来恐怕就会有Great revolution（大革命）发生。