隨着西安府白馬會衆的滅亡，整個陝西迅速被討虜平定。陳玉成一邊向聖京的馮雲山報捷，一邊馬不停蹄地組織兵力，準備進軍甘肅和阿拉善厄魯特旗地區。
不過，自從進入陝西以來，陳玉成越發感覺到步兵的侷限。西北地區與南方和中原一帶不一樣，只要一離開富饒的關中平原，便會地廣人稀起來。
陳玉成一打聽，說是有時候幾十裡都碰不到一個鎮子，遇不到一個人煙，他便知道，在用以前的步兵模式，已經是行不通了，再往西北，必須組建一支大規模的騎兵才行。
幸好，陳玉成早有準備，一路上，他們甲三師和乙三師以及河南新軍軍團一直蒐集馬匹，加上擊敗了白馬會匪，這些白馬會匪擁有不少的牛馬，均被討虜軍繳獲，此時已統計，竟然發現可以用於趕路的戰馬便有一萬餘匹，而可以拉炮和運輸糧食補給的牛馬更是多達二三萬匹。
陳玉成打算利用這段時間，進軍甘肅的路上，用來訓練將士們騎術，就算不能訓練出一批騎兵，至少也是一批能騎馬趕路的馬上步兵也行。
甘肅原本是滿清駐守西北的重地，駐紮的綠營兵本是內陸省份中兵員最多的省份。但自從滿清朝廷被推翻以來，整個甘肅便亂了套，逃的逃，躲得躲，如今的甘肅清兵已經不多，而且還大部分被甘肅的白馬會衆給趕跑了。整個甘肅，已經是一片混亂。
不過，即便是這樣，就整個甘肅來說，滿清的主要兵力都固守蘭州府，原本的寧夏鎮、西寧鎮、涼州鎮和肅州鎮這甘肅四鎮兵力，共三萬餘人，如今已經四散逃竄，只餘下萬餘人，一部分逃入蘭州城內緊守，另一部分還滯留在西寧城內，其餘的個甘南的各州府兵力，連同少量的八旗兵，被從西安逃來的西安將軍扎拉芬沿途召集，趕至寧夏城中，不過，一進入寧夏城，便被金積堡的白馬戰兵全部圍困起來，苦苦支撐着。
其他州府，已經沒有大規模的兵力了。
而白馬會匪，主要集中在二處地方。一是平涼府，有兩股白馬會衆勢力。
固原州的白納三，手下有李得艙、田成集等大將，白馬戰兵五六萬。而平涼府城郊外的馬穆三，人稱穆三爺，乃是白馬會中的長老級人物，他以蓮花城、張家川爲基地發動起義，組成“白馬南八營”，他的部衆戴白帽，打綠旗，旗上書“抗清扶明”口號，並用明代崇禎年號紀年，發佈命令不準濫殺無辜地方鄉民，在平涼州一帶名聲不錯，但卻遭白馬會中的主力寧夏府城一帶的白馬戰兵所排擠。
而要說另一股勢力，最爲強大，卻是寧夏府靈州縣一帶以金積堡爲中心的馬花龍勢力，他字稱白馬會會長，手下彙集了寧夏府和慶陽府一帶的白馬會精壯戰兵十餘萬。因此，儘管這些白馬會反清勢力尚未統一，卻又暗暗勾連，互爲倚靠。金積堡的馬花龍，隱隱有整個甘肅白馬會大首領的架勢。
理順了甘肅的形勢，陳玉成和林啓榮一商議，便決定立即出兵。
兩人各率自己的軍隊，再各自加上一萬新兵，直奔平涼府。而西邊的甲四師和甲六師，在樑立泰和羅瓊樹的率領下，連同三萬新兵，經過鞏昌府，直奔蘭州城。其餘的一萬新兵，便散開，鞏固西安府和秦州府一帶的治安駐防，防止零星白馬會衆死灰復燃。
兵分兩路，時間不等人，陳玉成他們是想着一舉將甘肅平定。
半個月後，當甲三師和乙三師以及二萬新兵氣勢如虹地一路攻克州縣，行軍到平涼府城境內時，平涼府城一帶的白馬會首馬穆三派人求見，表示不願與討虜軍爲敵，只要求平涼城歸他們所有，他們自治，他們保證不出平涼縣境損害討虜軍和百姓。
陳玉成當即拒絕，要求對方親自來與自己面見商議休兵事宜，並且強調，必須投降，討虜軍可不殺俘虜。
但馬穆三將信將疑，不肯答應下來。這也難怪，天下沒有不透風的牆。討虜軍在西安府擊殺白馬會衆十餘萬人，儘管討虜軍一直封鎖消息，但西安白馬會衆全軍覆沒的消息，還是傳了出去，而陳玉成的“殺人魔王”的名頭也早在陝甘一帶聲名遠揚，甚至能止小兒夜啼。
但正因爲這支討虜軍殺白馬會衆如麻的經歷，才讓馬穆三如此慌張，還未開戰便派人來試探投降的底線。
這一試探，發現這“殺人魔王”的口氣十分強硬，馬穆三更是擔心了。
無奈之下，他便準備接受。他知道，除非離開生活多年的平涼，否則，打是打不過討虜軍的，只有投降，說不定還能撿回一條活路。
可他這樣想，他手下的白馬會衆不這樣想。除了他弟弟馬穆輝表示願意誓死追隨他外，其餘的手下將領，竟然集中叛亂，直接將馬穆三殺死，率衆逃往平涼府的北部固原州，投奔雄踞固原州的白馬會首領白納三。混亂中，馬穆三的弟弟馬穆輝，率領不到一萬的白馬戰兵，直接放棄些木棒竹竿之類的武器，無條件歸順了討虜軍，要求討虜軍爲他哥哥報仇。
有了馬穆輝的這一萬白馬戰兵的帶領，討虜軍勢如破竹，直接攻克華亭、崇信和平涼府城以及隆德等州縣，兵圍固原州城。
固原的白馬會衆首領白納三，下令李得艙和田成集兩名手下，率領四萬主力白馬戰兵，不待剛剛趕到的討虜軍紮營，便發起進攻，卻沒想到，被討虜軍正面野戰之下，一戰即潰。隨即，討虜軍發起衝鋒，擊斃白馬戰兵二萬餘人，其餘的或逃入固原州城，或四散逃竄，討虜軍順勢一舉攻克固原州城，李得艙和田成集兩人被直接擊殺，白納三率領萬餘白馬戰兵逃往北面的寧夏府。整個固原的白馬會衆瞬間瓦解。
不過，陳玉成和林啓榮卻發現，不但平涼府城和隆德等縣境內，地方鄉民和百姓並沒有遭受殘殺，而固原州城內，竟然也有不少地方鄉紳和百姓，除了被逼迫捐獻些糧食和銀兩外，並沒有被屠殺一空。
再通過一些瞭解，發現包含固原州在內的整個平涼府，都沒發現白馬會衆大規模殺害當地鄉民的事情。於是，陳玉成和林啓榮兩人討論後，決定不與西安府的白馬會衆一樣對待，直接將衆白馬戰兵俘虜起來，宣佈要他們關押五年，恕罪後再釋放爲民。
不過，爲防夜長夢多，陳玉成下令，押着五千白馬戰兵，迅速北上，攻往白馬會衆的老巢，寧夏府城南的金積堡。
有了平涼府的先例，不久，金積堡的白馬會會長馬花龍派人送來信函，聲稱願意歸順中華帝國，也願意散撤十萬白馬戰兵，但請求保留一半兵力，供養白馬戰兵五萬人。
陳玉成不由冷笑，這是很明顯的想要自立爲王了，他想在中華帝國的領地建立國中之國呢！陳玉成讓信使直接捎口信回去，所有白馬會衆，必須無條件投降，否則，一旦討虜軍大兵壓境，雞犬不留。
不得不說，一路上碰到的白馬戰兵精銳，精銳是些手持竹竿木棒之類的兵器，讓陳玉成都高傲了不少。