由於受「武士道」精神的毒害，抗日戰爭開始後的很長時間裡，數萬名日軍戰死，居然無一被俘。為了抓到一個俘虜，中國軍隊許多官兵為此付出了代價。有一位營長背起一個半死不活的日本傷兵，準備送往急救站，半路上傷兵稍稍緩過勁來，一口咬掉了營長的耳朵。還有一位通信員在收電話線時，發現汽車底下躺著一個日本傷兵，受了重傷，呻吟不止。通信員掏出紗布準備為他裹傷，那傷兵卻揚手一刀刺進了通信員的腹部，由此可見日軍的頑抗到了何等的地步。林彪在戰後總結的《平型關戰鬥經驗》中曾指出：「日本兵之死不肯繳槍，一來因日本之武士道的教育、法西斯教育，同時也因他們對中國軍民太殘暴，恐怕中國人報復。」

平型關大捷後，115師一分為二。林彪率主力南下支援娘子關方面友軍，聶榮臻則率領師獨立團、騎兵營、343旅的2個連留下開闢晉察冀根據地。此時，日軍第20師團已突破晉東門戶娘子關，並於11月4日拂曉由平定直撲榆次，企圖直下太原，迂迴忻口方面的閻錫山、衛立煌主力，以解陷入忻口的板垣師團之圍，結果一頭撞進了從五台山南下的115師在昔陽縣西廣陽地區的伏擊圈。這時115師的全部人馬只有陳光343旅的兩個團(缺6個連)共4000兵力。伏擊圈是林彪在拂曉前部署的，具體分工是：685團由旅長陳光和團長楊得志帶領，負責堵截，686團由旅參謀長陳士矩指揮，負責殲滅伏擊圈內日軍。戰士們從拂曉一直等到下午3時，待其大部人馬通過後，對其後續輜重部隊發起了攻擊。陳士矩指揮的686團從兩側的高山不斷向狹長的谷底投彈射擊。日軍輜重部隊的騾馬受驚後亂蹦亂跳，將大車拉得東倒西歪。在敵人被打得暈頭轉向的時候，陳士矩果斷地命令司號員吹響了衝鋒號，指戰員們如猛虎下山，迅速衝向公路將敵人切成數段。剎那間，吶喊聲、刺刀的碰撞聲響徹了整個山谷。

從這些日軍的抵抗程度來看，遠不如在平型關第5師團的表現。陳士矩又產生了抓俘虜的念頭。正在這時，有一夥驚慌失措的日軍逃到公路北面的一個窪地。陳士矩轉身將警衛排長喚來，指著窪地說：「你帶兩個班衝下去，抓幾個俘虜」警衛排長一揮手：「一班、二班跟我來」陳士矩從望遠鏡裡目送警衛排朝窪地撲去，心裡暗暗高興。他對這些戰士們充滿了信心，因為這都是旅長陳光從部隊一個一個挑選出來的，不僅體格健壯，而且作戰勇敢。但是在一陣激烈的槍聲過後，警衛排很快就回來了，繳了不少三八大蓋，卻沒抓著一個俘虜，排長氣呼呼地說：「他們受武士道精神毒害太深，頑固不化，只好把他們消滅了！」

當夜幕降臨時，戰鬥已基本結束，686團共殲敵500人以上，在向林彪匯報了戰況後，陳士矩讓團長李天祐將指揮所移進了廣陽鎮。此時，鎮內還有不少殘敵在負隅頑抗。陳士矩進入鎮子，聽到零星的槍聲後，又一次激起了他抓俘虜的強烈願望。順著槍聲，他來到了一個小院門口，看到已有不少戰士將院子團團圍住，一個戰士正準備向院子裡投手榴彈。「慢著！」陳士矩連忙制止：「有多少鬼子?」「報告參謀長，就一個，鑽進了院子，老朝我們打槍。」陳士矩一拍大腿，將手槍別在腰間，「那還不抓活的扔什麼手榴彈。」他側身閃進院門，師偵察科長蘇靜也跟了進去。又一聲槍響，子彈打在門框上濺起一串火星，陳士矩貓著腰悄悄摸到窗口旁邊，用剛剛學會的日語喊道：「繳槍不殺，寬待日本俘虜」這時院外的戰士們也用剛學會的日語喊話，那名日本兵又胡亂放了兩槍。陳士矩耐著性子，盡量用溫和的口氣喊了幾遍。「明白明白的……」屋裡傳來生硬的中國話，那聲音充滿了恐懼。陳士矩一陣驚喜，可等了老半天仍不見屋裡有任何動靜，他忍不住一腳踹開房門，藉著月光一眼就瞧見了明晃晃的刺刀，伸手抓住槍管用力一拖，鬼子嚇得尖叫一聲，連忙鬆手。明亮的月光從門窗射進來，照在日本兵蒼白失色的臉上，陳士矩定睛一看，差點捧腹大笑起來。鬼子站在一個糧食筐裡動彈不得，看來掙扎了好一陣，累得汗水把軍衣都浸透了。陳士矩費了好大勁才將那名日本兵拖出筐。日本兵嚇得渾身發抖，汗珠從額頭上淌下來，將陳士矩的軍衣也浸濕了一大片，蘇靜等人衝進屋子，興奮地大叫起來：「陳參謀長抓了俘虜！」

陳士矩在回憶錄中說，他親自捉俘虜的消息很快傳遍了整個鎮子。大家都爭先恐後地跑來看，因為這是八路軍捉到的第一個日本俘虜。經審訊，這名俘虜是日軍第20師團第79聯隊輜重兵軍曹加膝幸夫。