第三十七軍和第五十三軍在又頂住了日軍一整天的進攻之後，于元月四日晚十點，奉命趨夜全部撤出了陣地。通向長沙城郊的道路為日軍打開。第六師團和第四十師團經過一夜休整，元月五日清晨占領了高子嶺和春華山陣地。沒有遇到抵抗的這二個師團并沒有停下，而是立刻向長沙城攻擊前進。
因為第三十七軍和第五十三軍撤走了，九十軍二一一師跳馬鎮那裡協助防守的九十二師二個團也奉命離開，這下跳馬鎮這道長達二十多公裡的防線守還是不守就成了唐龍仔頭痛的問題。在悄悄請示了姐夫王海濤後，唐龍仔把二個團收縮到跳馬鎮周圍，而别的地段隻派出偵察分隊監視日軍動向。
浏陽河西岸本來有三十七軍負責防守，三十七軍在撤出陣地前，通知二七二旅接收陣地，旅長張靈甫把肖長新的五四六團給派了上去，好戰的張靈甫雖然把旅指揮部放在了城牆下的第三道陣地上，自己卻始終在前面陣地上待着，現在五四六團接防了浏陽河西岸陣地，張靈甫不放心，不顧身邊人的勸說，帶着警衛連就去了浏陽河西岸陣地。
日軍第六師團上午十點鐘時，前鋒第十三聯隊到達浏陽河東岸，并建起了攻擊陣地。聯隊長友成敏大佐登上高處，用望遠鏡對着河西岸的守軍陣地仔細觀察起來。浏陽河比起新牆河和汨羅江都要寬，雖然冬季是枯水季節，水深也有三米以上，徒涉是不可能的，船隻也被守軍全部拿走，河東岸就沒發現有一隻船隻的影子。
那麼想渡過這條寬度在五十米以上的浏陽河隻有讓工兵部隊架橋了。現在第十三聯隊所處的位置是長沙市的一個名叫榔梨市的鎮子，浏陽河在這裡畫出了一個“幾”字彎，榔梨市就正對着“幾”字灣頂上的一橫。這裡水流相對平緩，寬度也不大，正合适架橋。
友成敏大佐一面在觀察着地型和河對面守軍情況，一面派手下把情況向師團長神田正種中将報告，請求師團長派出工兵部隊前來架橋。一個小時後，第四十五聯隊，還有騎兵聯隊護送着工兵聯隊到達河東岸，帶隊的第六旅團旅團長竹原三郎少将還地上次空投的橡皮艇也全部帶了過來。
野炮兵第六聯隊行動緩慢，一時趕不到這裡，竹原三郎少将就把幾支部隊全部的火炮集中在了一起建起了炮兵陣地，三十六門九二式步兵炮，十二門騎兵野戰炮集中在一起後，也還是不小的一支炮兵力量，這些火炮雖然口徑小，威力有限，但是對上一般的國軍部隊，還是很管用的。
可惜他們遇上的是九十軍的部隊，張靈甫雖然把團野戰炮營集中使用了，可是每個團大小口徑的迫擊炮就有一百多門，還有威力在九二式步兵炮之上的120口徑重迫擊炮十八門，有了這些迫擊炮在，日軍想要強渡浏陽河，必定會付出相當的代價。
日軍在觀察河西岸守軍陣地，張靈甫也和肖長新一同在河西高地上觀察着河東日軍情況。張靈甫在到達河西陣地後，對三十七軍留下的防禦工事有許多地方都不滿意。必竟三十七軍做不到九十軍那樣修建工事的完美程度。張靈甫指揮五四六團抓緊時間加固工事，一直忙到了日軍到達。
河東岸，竹原三郎少将指揮士兵把橡皮艇放入浏陽河，并在橡皮艇上架起機槍，準備試着強渡一次，然後又派出一個騎兵大隊和一個步兵大隊去榔梨市搜尋架橋所用的材料。橡皮艇準備好後，竹原三郎少将下令炮兵對守軍陣地進行炮擊，橡皮艇在炮火掩護下強渡浏陽河。
日軍炮擊開始，張靈甫己經進入了一處地堡工事中，九二式步兵炮隻能對沙袋掩體和戰壕有一定的破壞做用，對地堡工事是無能為力的。在地堡工事中，張靈甫仍然用望遠鏡在觀察着河面。日軍放下了三十多隻橡皮艇，每隻橡皮艇上也隻有十餘名日軍，見日軍開始強渡了，張靈甫也下達了攻擊命令。
這次的攻擊，最前沿陣地上的一營隻動用六挺重機槍封鎖江面，此外團裡的迫擊炮，十八門120重迫擊炮打擊日軍炮兵陣地，其餘的迫擊炮拿出一半打擊河面上日軍的橡皮艇，另一半隐蔽待命。而戰士們則是保持警戒，日軍不靠岸，不用還擊。
張靈甫這樣布置是想讓戰士們少受損失，地堡中的重機槍日軍炮火打不動，可以盡情射擊，戰壕和沙袋掩體裡的戰士們隻要隐蔽就好。隻有十八門重迫擊炮才能夠上日軍炮兵陣地，别的廹擊炮隻能打到河面和河西岸，隐蔽一半的廹擊炮也是張靈甫不想太早暴露全部實力。
就算這樣五四六團顯露出來的實力也驚呆了竹原三郎少将。支那人對付自己炮兵陣地反擊的重迫擊炮不算，光是打向河面上的迫擊炮就超過了五十門，按支那精銳部隊一個團才配有十幾門迫擊炮來算，河對面的支那軍隊其碼是一至二個精銳師。
眼看着在支那軍隊密集的炮火下，強渡的橡皮艇紛紛中彈，竹原三郎少将忙下令撤退，命令下達，還沒劃到河中央的幸存的橡皮艇又掉頭往回劃，等回到東岸，強渡的三十幾隻橡皮艇隻有十餘隻了。并且在炮戰中自己的三、四十門火炮也被損失掉一半。
竹原三郎少将被這當頭一棍打得昏頭轉向，忙指揮部隊後撤出去二公裡，避開支那軍隊的火炮攻擊範圍，同時再次向師團長神田正種中将報告，請求派炮兵聯隊支援。神田正種中将很清楚，不擊退河西岸守軍，是沒辦法強行架橋的，又聽說河西岸有支那一至二個精銳師駐守，并且配有大量輕重迫擊炮，便一面催促野炮兵聯隊加速前進，一面把情況上報到阿南惟幾司令官處。
與此同時，第四十師團也到達了浏陽河東岸，因為五十三軍奉命後撤，第四十師團并沒有發現河西岸有中國軍隊在駐防。隻要渡過浏陽河，就能順利向長沙城挺進。師團長青木成一中将一面暗喜自己運氣好，一面派出部隊去搜尋架橋材料。
第六師團和第四十師團都己到達浏陽河西岸，隻要渡過浏陽河，離長沙城郊就不遠了的消息被第三師團師團長高橋多賀二中将知道後，讓高橋多賀二中将大受刺激。剛剛上任第三師團師團長沒多久的高橋多賀二中将急需戰功來證明自己，攻陷長沙城就是最好的戰功，況且在一同攻擊的幾個師團中，自己的第三師團人數最多，武器裝備最精良，戰鬥力也最強，要是攻陷長沙城的戰功被别人得去了，面子有失是小，失去上司的信任是大。
因此高橋多賀二中将給手下的二名旅團長下了死令，加強進攻，要盡快拿下守軍陣地，第三師團必須最先到達長沙城下。這道命令一下達下去，第三師團的進攻立刻兇猛了起來，加上獨立野戰重炮大隊的助攻，守在陣地上的五四四團馬上感到了壓力。
五四四團所守的陣地分成二部分，一部分在浏陽河北岸的一排山頭上，這裡是二營在防守，主力還是在浏陽河南岸，這裡有用了半個月時間建起來的防禦陣地。現在二七一旅旅長唐亦群就在這裡坐鎮指揮。浏陽河北岸這處名叫洪山的陣地上，之所以能頂住日軍二天的進攻，是因為撤下來的五四三團留下了一個營在洪山陣地上共同防守。
二天的進攻，日軍的重炮把洪山整個削下去了好幾層，陣地上的工事也沒一處完好的，就在這樣的情況下，陣地上的戰士們死戰不退，陣地前鋪滿了日軍士兵的屍體。不過二天激烈的戰鬥打下來，陣地上二個營的官兵，隻有四百多人還有戰鬥力，連五四三團留下來的二營營長唐亦樹都身負重傷送了下去。
旅長唐亦群多次來電詢問陣地上的情況，負責指揮的五四四團二營營長唐為初就一個回答:“二營在堅守，陣地還在我們手上！”現在日軍再次強了攻勢，一個步兵大隊還沒退下去，另一個步兵大隊又沖了上來。面對日軍的人海戰術，唐為初也漸漸感到力不從心，陣地上能戰鬥的士兵越來越少。
到了元月五日下午，洪山主陣地上能戰鬥的官兵連唐為初算上已不足二百人了，這時旅長唐亦群撤退的命令傳達到了唐為初的手上。唐為初很明白，在日軍攻擊未停的情況下，一但下令後撤，這麼多輕重傷員，加上還有浏陽河要渡，時間上肯定來不及，必須留下部分戰士斷後，與日早皿戰到底，為傷員後撤羸得時間。
唐為初趨日軍攻擊的間隙，把陣地上的官兵聚到了一起，宣布了旅長下達的撤退的命令，然後說道:“弟兄們，我仞現在撤出陣地，小日本肯定會攆在我們身後打，我們有這麼多傷員，還要渡過浏陽河上的浮橋，時間上是來不及的，必須留下部分人在此與小日本皿戰到底，為傷員後撤赢得時間。有誰願意後撤的，可以和傷員一起撤過浏陽河，願意留下斷後的，就和我一起和小日本拼了！”