第二天，各部越过城北，攻打临清堰。太平军将领汪海洋背水抵抗。楚军深入，遭遇埋伏，副将余佩玉阵亡，跟随他的士卒阵亡三百人。这时候，安徽南部的太平军古隆贤部投降，献出石埭、太平和旌德。湘军驻守东坝，接连攻克建平、高淳和溧水。天京太平军将李秀成召回，商议对策。李秀成提出放弃天京，但洪秀全不允。
当月，海宁太平军将领蔡元隆见杭州与嘉兴遭到逼攻，便向湘军投降。蒋益澧请求以廖安之任海宁知府，前往探察，自己率领轻兵，驻扎隔江的小泗渡。廖安之抵达海宁后，蔡元隆便渡江，将武器和人众造册献出，于是湘军进占海宁州。
左宗棠将蔡元隆改名为"蔡元吉"，留下他手下的四千人，令他率领进攻桐乡，又派张景渠、叶炳忠驻防海宁。蔡元吉率部乘夜袭击桐乡，攀梯登城。太平军惊觉，在城堞上抵抗，击伤蔡元吉部一百多人。蔡元吉部只得暂时在城西南驻扎。蒋益澧派李邦达部会同张景渠部驻扎城东南。守军何培章部献城投降。楚军进占桐乡，令何培章率所部三千人驻守乌镇，控扼杭州通向嘉兴的孔道。