1935年11月4日下午，何建業打發曾大去南昌讓何府留守南昌的人想辦法搞去往天津方向的車皮，自己帶着在師部和旅部劃拉的盒子炮和漢陽造，加上醫院回來的傷兵，500餘人在操場上站了一圈，何建業站在內圈說道“部隊仍然在休整中，本來也不計劃讓你們額外訓練的，但是疲憊的時候的訓練更能激發人體潛能，所以我決定，全團500餘人展開長途拉練，現在由各小組組長領彈藥，步槍8成新以上的是200支，子彈現在還剩下3萬5千餘發，盒子炮只從師部和旅部倒騰回來80支，子彈也只有6000餘發，說實話，家底是真不厚，況且以後很長一段時間內我們都得不到師部的補充了，要全靠我們自己了。你們幾個隊長合計一下，把槍支彈藥平均分配下去，我估計加上你們在剿匪時候私下留下的盒子炮，長短槍人手一支是不成問題的，你們自行分配。我去趟師部，曾大，你負責分配完了後集合隊伍準備出發。”
“是，團長！”曾大大聲應是，
何建業大步走到師部外面，大聲喊道“報告”
“進來”李玉堂喊道，一看是何建業，眉頭就皺了起來。
“何建業，東西給你了，你又來幹什麼啊？”李玉堂說道，
“師長，我計劃帶領補充團的500多新兵進行一次野外拉練，提升長途奔襲能力，希望師長批准！”何建業報告道，
“哦！具體計劃是什麼？去哪裡？什麼時候返回清江的營地開展正常訓練。”李玉堂問道，
“師長，主要是訓練野外生存能力、長途奔襲能力、潛行摸排、偵察等等能力，具體防線就是根據地形決定的，大山、城市、丘陵等等地形都要接觸不是？所以具體去哪裡要途中根據狀況來定，預計是12月底返回清江軍營。”何建業報告道，
“去吧！勞資懶得管你，別出亂子；另外提前安排人前往清江設立軍營。”李玉堂揮揮手說道，
“是，師長，那我去了。”何建業說完直接奔着補充團集結點去了。
11月4日晚上，在南昌火車站，何建業帶着200人出發了，另外的人被何建業安排楊小石帶着剩下的300人返回清江設立營地展開訓練，等待何建業他們拉練歸來。出發的200人中，100人配發盒子炮，配發一個10發短彈夾和一個20發的長彈夾，另外配發20發消耗補充子彈後；另外100人配發一支用步包起來的漢陽造步槍，配發子彈50發。200人在何建業的帶領下，登上火車出發了。
火車一路向北而去，經過反覆轉車，中間還夾雜中很多時候的野外武裝越野的奔襲，200人都以爲是拉練，都不敢吱聲。到了11月7日，部隊到達天津外圍，在一個小鎮，何建業包了一個旅館，安排大家好好的吃了一頓，吃完後叫大家休息，200人在吃喝完之後，條件性的爬上牀就睡覺，被何建業坑慘了，怕睡不了多久又要被折騰起來；不過這次何建業沒折騰大家，直到第二天早上才告訴大家準備出發，隊伍分成幾波進城，每次不超過10人一起，然後制定了匯合的旅館，在日租界外圍的很多小旅館今天開始都滿客了，客人就是何建業帶着這200人，何建業直接包下了5個旅館安頓這些人。
11月8日天還沒亮，感覺二少爺有點不尋常，曾大悄悄的來到何建業的房間外面，等待何建業起牀，何建業在習慣性鍛鍊後，7點鐘出門正準備去外面吃早飯，另外查探情報。看見曾大在外面，何建業示意曾大進來，問道“什麼事？”
“二少爺，你帶兄弟們來天津幹啥啊？是不是有事啊！有事你招呼啊！我肯定帶弟兄們辦好，怎麼也不能讓你犯險啊！要不我回去怎麼給大少爺交待啊！”曾大直接說道，
何建業看着曾大，發現曾大可能知道什麼了，就直接說道“你是從前一陣子我打探孫傳芳的情報猜出來的吧！沒錯，我這次來就是想一了百了，勞資把他綁活的回去，在祠堂告慰父親及諸位叔伯，這十幾年，我每個晚上都被夢中血淋淋的場景驚醒，就是拜他所賜。所以我帶了這麼多弟兄來，要是隻是爲了殺了他，我一個人早就來了。還不用這麼大陣仗。”
“二少爺，你放心，孫傳芳那老小子我也認識，情報我也知道，我今天先帶弟兄們去踩點，您先在這等着，二少爺，您放心，絕對不會讓你失望。”曾大說完就直接出去了，
晚上，曾大帶着幾個弟兄回來了，何建業房間，曾大說道“二少爺，地點知道了，孫傳芳現在就在居士林佛堂，他在天津組織佛教居士林，自任理事長；不過今天據兄弟們踩點的情況看，那些所謂的出家人中間有十多個明顯是老兵退伍的，從虎口、肩膀和走路、坐臥等姿勢可以看出，絕對是積年老兵，恐怕不好對付。我留了幾個弟兄還在探查，看有沒有另外的發現。”曾大說完就出去了。
何建業在旅館坐臥不寧的等到了第二天，消息傳來，出家人中間孫傳芳的保鏢恐怕不下20人，大部分人配備了盒子炮，少部分是擼子。而且這二十多個人都是孫川芳的死忠，每天二十四小時爲孫川芳提供保護。何建業實在等不了了，眼看仇人就在眼前，還讓他逍遙自在，何建業感覺一閉上眼睛父親血淋淋的雙手就在指着他。
11月10日上午，何建業叫曾大集合所有人，在房間根據穿回來的地圖分配任務，50人分兩撥在前門和後門守候，防備孫傳芳跑掉，並準備接應。50人分成5個小組，從五個方向摸進居士林佛堂，何建業要求對居士林內的所有人都必須進行控制（打暈），並要求弟兄們能不動槍就不要動槍，對反抗的死忠衛士，可擊斃。
11月10日吃過午飯，每個人都在房間睡覺休息，因爲大家都知道從今天晚上開始直到把孫傳芳帶回江西，大家可能都沒辦法好好睡覺了。下午6點，天色眼看漸漸黑了起來，何建業通知大家各自向日租界旁邊的居士林佛堂潛行。