一個離職的陸軍次長，公然盜用關防，與人合謀劫取槍械，還在無中央正式任命的情況下當了奉軍副司令，此事在北京政治圈中傳為奇談。徐樹錚膽子之大，令北洋系內部全都為之咋舌不已，段祺瑞聽聞後也很吃驚，對左右說：“又錚（徐樹錚的字）闖禍了！”
眾所周知，徐樹錚乃段之心腹。徐樹錚闖了禍，段祺瑞不得不幫他擦屁股，於是一邊給徐樹錚發電報，責備他“違法亂紀”，一邊向張作霖下命令，要求將扣留的軍械運回北京。
張作霖哪里肯將到嘴的肥肉再吐出來，他復電說奉軍本來就要興兵對南方進行“討伐”，正打算籌措軍械呢，現在中央主動把槍械送來了，正好！
徐樹錚則致電陸軍總長段芝貴，說明此事與段祺瑞無關，並要他轉告段祺瑞，說張作霖扣留這批軍械，將用於編練入關的奉軍，對主戰派是有利的。
後來有一天，徐樹錚和曾毓雋都在段祺瑞那裡，段祺瑞便又提起了這件事，認為徐樹錚劫械是“教猱升木”。
“教猱升木”乃中國的一句古語。猱者，猴也，教猴子爬樹。也就是教唆壞人幹壞事的意思。段祺瑞話裡有話，他認為徐樹錚是以槍械為誘餌，引誘奉軍入關，屬於一種不道德的政治行為。
徐樹錚馬上說：“那麼'長江三督'之'升木'（暗指主和）又是誰教的呢？”段祺瑞頓時語塞。
馮國璋得報後，固然心疼丟失的槍械，但與劫械案相比，奉軍入關才是真正要他性命的大事。
徐樹錚到瀋陽本是秘密行動，但世上沒有不透風的牆，京城內早就傳得沸沸揚揚。對徐樹錚此番用意也是說法頗多，有說他要助張作霖復辟的，有說要助張作霖倒馮的。馮國璋聽到後，急忙派人給徐樹錚發電報，要他“回京息謠”。
徐樹錚回了封電報，大意是：“一不復闢，二不倒馮。”
馮國璋再讓段祺瑞召徐樹錚回京。段祺瑞無法推辭，便照他的意思給徐樹錚發了電報。徐樹錚回電雲：“國事日亟，匹夫有責，樹錚只知有國家，他非所知，一時不等即回，異日當赴師門領責。”
1918年2月中下旬，奉軍一部開進關內，分駐於秦皇島等地。 2月26日，馮國璋在總統府召集緊急會議，商討如何對付奉軍入關。會上，他質問段祺瑞：“這次奉軍出兵入關，事前既未奉命，也未呈報，居心何在？”段祺瑞回答說不知道。
馮國璋又接著大聲問道：“前任陸軍次長徐樹錚到奉天做何勾結？”段祺瑞更難以作答。
馮國璋開這個會是想要段祺瑞叫張作霖撤兵，可奉軍原本就是段祺瑞召來的，他本人即便不同意劫械，卻也不反對奉軍入關。這種情況下，你讓他怎麼叫張作霖撤兵呢？
退一步說，就算他老段出於引狼入室的顧慮，肯去跟張作霖說，事到如今，那張作霖也要願意聽啊！
奉軍繼續源源不斷地進關，其中有一支隊伍甚至開到京津線上的廊坊，且人不解裝，馬不卸鞍，戒備森嚴。
京城形勢一下子變得緊張起來，隨之謠言四起，議論紛紛。馮國璋趕緊給張作霖直接發去電報，問對方用意何在。張作霖復電言稱要“保護總統”。
馮國璋跟著就又發去一份電報，說政府既沒有命令，北方也沒有戰事，我這個總統要你保護什麼？他同時以邊防重要為由，命令張作霖召還入關部隊。
張作霖不再加以掩飾，他直言奉軍入關，執行的是北京政府的“討伐令”，部隊一到南方戰場，就會歸曹錕、張懷芝節制。接著，徐樹錚通電就任奉軍副司令，並開始指揮關內奉軍為前線的直魯兩軍建造運輸橋。
至此，奉軍進關的秘密水落石出。國務總理王士珍一看主戰派竟然擺出了這樣的陣勢，便再也無心給馮段之爭當墊背了。他讓國務院秘書長惲寶惠替他擬了一個請假的呈文，並且叫惲寶惠代他呈遞。之後也不向馮國璋打招呼，便換上便衣，悄然掛冠而去。
惲寶惠原以為馮國璋會因為這一突發事件而驚詫，或至少在臉上露出各種複雜的表情。可是奇怪的是，當馮國璋看完王士珍的呈文後，卻並未有任何詫異之色。只見他很自如地在呈文上批了幾個字，意思是請假照準，由內務總長錢能訓暫行兼代。
等惲寶惠辦好命令，送到錢能訓的家裡請他副署時，錢同樣乾脆得很，拿過命令就在後面寫上了“錢能訓”三個字。
在惲寶惠看來，這是馮派在主戰派的猛烈打擊之下，已毫無還手之力的一種表現。事實也正是如此，王士珍逃至天津後，即提出正式辭職，並寫了一封信給馮段二位老友，發誓今後決不回京任職。緊接著，馮國璋又在段祺瑞等人的壓力下，公佈了“國會組織法”等條例，這就意味著一旦時機成熟，段祺瑞就可以通過新國會的選舉登上總統的寶座，馮國璋連自己屁股下的那把交椅都岌岌可危了。