然而，事情并没有结束，第四师团的士兵们又耍起了新的花招――消极怠工。
从到，第二师团走了四天，第四师团却整整走了八天，而且大量人员掉队。
凑巧的是，第四师团先遣队到达前线的当天，苏日宣布停战。消息传来，掉队的第四师团官兵仿佛吃了大力丸一样迅速跟了上来，连留守的官兵也有不少
“带病”赶赴前线，一边还在万分懊丧地抱怨居然没有机会打上一仗。返程的时候，第四师团成了日军中最威武的部队，而率先赶到战场的第二师团却丢盔卸甲、伤兵满营。
负责新闻宣传的军官实在看不过去，提起笔把日军报纸呈上审查的《我无敌皇军第四师团威势归来》改了一个字，变成了《我无伤皇军第四师团威势归来》，拐弯抹角地嘲讽了这支
“软蛋”部队。尽管出尽了洋相，但第四师团运气却相当好，因为当时侵略华中地区日军战事吃紧，急需增援，日本军部只好放弃追究第四师团，急调其南下增援。
第四师团摇身一变，又成了日军精锐的第十一军中的一员。
“有第四师团参战，本来能打赢的仗，也会打输……”其实，第四师团的名声，中国军队早有耳闻，早在期间，中国军队就遇到过一支
“奇怪的日军”。当时，面对日军合围，指挥四十万大军巧妙地跳出了日军的包围圈。
但中国军队突围后已是人困马乏，重装备也丢失了很多，战斗力锐减。
在过鲁苏皖边境一条公路的时候，疲惫的中国军队忽然发现路上出现了一支装备精良的日军部队。
因为部队已十分疲惫，中国军队发现敌军后惊惶失措，混乱地离开公路撤向附近的山区。
奇怪的是，过了很久都没有日军追来，中国军队的指挥官惊奇之余派人打探，却见那支日军丝毫没有追击的意思，相反，日军还在公路两侧堂而皇之地烧起饭来。
这支奇怪的日军部队正是第四师团的南进支队
“保命最重要”
第四师团虽说窝囊，但毕竟是，老兵多。由于日军作战损失很大，急需补充老兵，便不时抽调第四师团官兵补充到其他师团。当时，日军各部的临别致词都有自己的特色，比如第二师团，战况较好时就说“武运长久”；情况不妙时就说“九段坂见”（靖国神社在东京九段坂）。然而第四师团的官兵告别时，却常说“御身大切”，翻译过来，即“保重贵体”、“身体第一”，或者干脆就是“保命最重要”。
日军在进攻衡阳和芷江时遇到中国军队的顽强抵抗。战斗一开始，来自第四师团的老兵又故伎重演，从军官、士官到老兵纷纷入院，消极但合理地拒绝作战。当负伤的日军士兵到医院的时候，那些“养病”的第四师团“前辈”们还要问：“你为什么要这样玩命啊？”当被问到自己为何不愿意参战时，这些“病号”却豪气冲天地说：“听说这次出击我们是担任佯攻的，这很没有意思，如果是主攻么，自然是要好好打一仗喽。”
由第四师团预备役官兵组成的独立第十五工兵联队，由横山大佐率领，就在立下功勋。伊藤正德《帝国陆军的最后》中，提到这个联队在修复盟军炸毁的桥梁涵洞方面作用极大，“大阪兵无能只是误传，至少以这个联队而言，其献身精神使军部，师团部的高级军官都乘夜前去表达感谢和敬佩，其无我奉公精神极其令人钦佩……”[有评：看来，这个联队的确干得不坏，不过，说到底，修桥补路这种活儿，和上阵打仗终究还不是一码事儿。]
太平洋战争爆发，日军各部都投入到对盟军的作战中，第四师团也终于有了建功立业的机会。大本营有意将该师团配属南方军，但南方军只是很勉强的将其列入预备队，仍然驻扎上海。直到一九四二年四月，才将其调往菲律宾，和第五，第十八，第二十一师团一起，参加对科雷吉多尔要塞的最后攻击。这一仗第四师团一反常态地进展顺利，圆满完成任务，最终在的美菲军全部投降。事后才知道这并不是第四师团转了性，而是菲律宾的美菲军已经被切断补给多日，靠“盐和青菜”活着已经好几个月了，一触即溃一点儿也不新鲜。
然而，这个胜利却给第四师团带来了极大的荣耀，在其故乡大阪更是号外频飞，一副“幸亏派出了第四师团，才打垮了巴丹敌人”的得意。仅有的遗憾是事后发现大阪的商贩们利用这个庆祝胜利的机会大肆倒卖战时配给物资，乘机大做生意。
对第四师团的底细，还是大本营知道得清楚，所以对于怎样使用它实在是绞尽脑汁而不得其计。由于第四师团名声在外，在各个战区都不是很受欢迎，于是直到战争结束，这支部队始终在后方各地不断调转，始终没有再参加大的战斗。
1945年8月日本投降时，第四师团正在泰国的曼谷附近休整。与其他不肯接受战败命运的日军部队不同，第四师团的投降与回国进行得异常顺利。当全体面色红润、身体健康的第四师团官兵出现在日本港口时，本土那些营养不良、形容枯槁的日本人都十分吃惊。统计下来，第四师团是日军南方军中战死最少、装备物资保留最完整的部队。美军对这个师团的评价是“爱好和平”。而第四师团回国后，也马上体现出这一特点来，回国后第二天，就有官兵跑到美军兵营前，整齐地摆开摊位，兜售起战争纪念品来