南的暧昧态度，广西也不敢贸然行动。但是自1920年以后，自治和民主运动的合流逐渐改变了这种局面。湖南在1921年的宪法中从文字上废除督军后，就一直致力于从实质上废除督军，统一全省军队，这个行动自然受到谭延铠的大力支持，民国党主张至少从表面上要废除督军，而深受劳动党影响的湖南国民党则希望采取更加激进的行动。但是对于这些要求，赵恒剔均已各种借口向推托，诸如“军心不稳、惯匪未除”等等。

但是1923年，先是赵的部队传出“通匪”的丑闻，赵恒剔在媒体的穷追猛打下“形象受到沉重打击”政治地位也受到各界的巨大质疑。为了挽回颓势，他被迫同意裁撤督军，自然事情也不能做得那么绝，毕竟他的军队可不是吃素的。按照湖北的惯例，他被任命为军务督办，归属省府、向议会负责。接着，**以考察教育为名，从同盟订购回了湖南梦寐以求的军火设备，附带还有日式枪械的技术，虽然这些技术被向限定为只能在湖南使用，但是这已经是个天大的喜讯了。

围绕兵工厂的地址问题，赵恒剔和谭延铠以及省府发生争执，赵恒剔的意思是将兵工厂建在长沙，这样，他的军队里的都比较近，一旦发生冲突，他也能占到更大的便宜。但是，省府的意思是建在湘潭东边不远的株洲，公开的理由用**的话来说就是“地近原料产地、经济上最为优化”但是，实际上这里却地处长沙和衡阳之间的中间，可说处于谭延铠的绝对控制之中。而赵部最近的也在西边的邵阳，而且距离比衡阳还远，中间遍布山地丘陵，衡阳却可以顺湘江而下。

可以说，一旦发生冲突，赵部的军火补给将毫无保障，没有军火，部队是不能打仗的。因此赵恒剔自然竭力反对，可是他在政府中只能代表军方，何况议会也不支持他，结果可想而知。赵恒剔预感到再忍下去，用不了多久，他的部队就会被收编。于是长期关注湖南政局的陆荣廷很自然的找到了机会，双方开始秘密接触，期望能够在对方那找到力量。陆荣廷甚至还打算拉拢陈炯明，可是陈炯明虽然没太大的志向，但是一点也不傻，他知道桂系对广东的热情，要是抛弃孙中山，大概陆荣廷立即就会反目，把他送到乡下去养老。

因此，虽然孙中山在1923年改组大元帅府为国民立宪都督府，并且同时废除了粤军总司令、改组了广东省政府，但是他却不敢接受陆荣廷的热情。况且，孙中山已经接受各方的建议，选举他为广东省省长，并且任命他为参谋总长，一方面他可以通过省长指挥粤省军队剩余军队，另一方面由于都督府参谋总长通过参谋总署同时行使军令、军政权，实际上他的地位并没有受到实质的损害，由于“获得高升”他似乎还获得了孙中山的信任，因此政治上还获得了不少额外的东西。

要说孙中山改组大元帅府也可以说是受了民国党攻击的影响，虽说民国党对国民党攻击不多，但是每一次都击中敌人的要害。比如，民国党指责国民党“欲实现民主、扫除军阀，自己却不行民主，成立军政府，如何能够服人心。”自然，同盟地处关外，逍遥自在，几年的光荣孤立，各种民主制度纷纷完善，称得上很多民主人士的心中净土，因此说起来，自然理直气壮。