对于当时中国来说，非暴力和平主义思想的最大障碍无疑就是军阀专权，所以要推动中国民主政治的发展，就必须调整中国政治统治的结构，必须解决军阀问题。这是当时政治的焦点，也是当时一切有志之士的共同看法。
武昌起义爆发后，各省相继独立，各省都督成了地方上的至上统治者，位高权重，一言九鼎，甚至能够以地方的名义，或者联合地方干预中央事务。所以到了民国初年重建政治结构，袁世凯于1913年创设军民分治体制，各省设民政长，分隔或者说制约各省都督的权力。其主观目的无疑是对的，只是由于当时特殊背景和原因，这个措施并没有发生实质性作用，各省都督的权力不仅对中央来说形成尾大不掉之势，而且在各省内部也形成了土皇帝式的独裁统治，使中国在赶走了一个皇帝之后产生出无数个小皇帝。
袁世凯死后，黎元洪继位，黎元洪也深知各省都督的权力过大不利于中国发展，所以他最先提出“废督裁兵”的政治主张，调整、改革中央及各省官制，改各省督理军事事务的长官为督军，改各省民政长为省长，军民分治。然而不知什么原因，黎元洪的这一变革并没有成功，省长并没有成为各省的权力中心，而督军在各省依然拥有至上权力。
各省督军当然也不是拥兵自重，胡作非为，实事求是地说，民国初年以来的各省督军大多数还是为本省办了许多好事，像阎锡山在山西，陈炯明在广东，卢永祥在浙江，都为地方发展贡献过心智。只是军人专政从来都有名不正言不顺的感觉，不合乎中国传统政治思维习惯，所以在民国初年的中国政治界、思想界，废督裁兵之说成为一股重要的政治思想潮流，发表了大量的文章，形成规模声势巨大的民众运动。然而仔细检讨这些文章、运动，我们又不难发现，虽然大量的文章、大量的运动参加者是真诚地推动废督裁兵运动，真诚地希望重建中国政治权力中心，不过也有许多参与者心术似乎并不那么纯正，而是有借运动借思想以表达另外的想法另外的目的。至少，在中央掌握权力的人提出、推动废督裁兵，不排除有人是借此机会打击地方，重建中央政府的强势和威权。而文职政客提倡和推动废督裁兵，大多因秀才遇到兵有理说不清，饱受军人独裁的痛苦，所以也有借此机会进行政治斗争的意思。
其实，真正饱受军阀专权之患的是一般百姓，他们对军阀擅权的反对肯定是真诚的，不过也必须注意的是，由于各省督军拥有在地方的至上权威，假如这个至上权威爱民如子，能为地方办好事办实事，那么所谓的人民并不一定介意这个至上权威是军人还是文人，军人未必坏，文人未必好，文人误国、文人贪婪、文人无行的例子其实也是不胜枚举。所以各省政治统治的中心究竟应该在军人的手里，还是文人的手里，在民国初年其实并不是一个真问题，直至北伐成功，国民党重建全国统一，各省成立党部，党的领导人成为各省政治权力的中心，省长成为行政权力中心，但是依附于省党部之下，此之后，各省的政治权力便成为“党阀政治”。党阀政治在本质上与督军政治并没有区别，只是党阀们并不一定来自军界或继续指挥军队而已。
党阀政治还是后来全国重建统一之后的事，这里不再讨论，而督军政治之所以衍生出问题，主要还是当时的中国实际上处于四分五裂的状态中。北洋政府在理论上是中国惟一的合法政府，也是国际社会承认的惟一政府。然而自从民国初年的二次革命后，南方以孙中山为领袖的革命党人始终被北京政府边缘化，始终进入不了政治权力的中心，甚至始终被排斥在政治游戏之外，这就使得南方革命党人在民国前期不得不在北京政府行政体制之外找到一切理由建立自己的行政体制，划定自己的统治范围。孙中山和南方革命党人利用北京政府特别是袁世凯的倒行逆施，参与或发动护国运动、护法运动，这些运动从政治理念上说当然具有正义性，但在实践中却主要的是为了建立自己的地盘，所谓南方的革命政府、军政府等，其实与其他省份的督军一样，就是割据的军阀，就是军阀统治。所以，当南北和谈有了可能，废督裁兵便被提上政治日程，南与北都在利用这个机会，都希望通过这种和平的谈判不战而屈人之兵，达到战场上没有实现的目标，废除别人的督军，裁去别人的兵。所以，通过南北和谈根本不可能实现废督裁兵的目的。
南北和谈的契机出现于第一次世界大战结束时，也正是那个时候，上海知识界实业界人士呼吁废督裁兵，北京政府很快接过这个口号，训令和谈代表将“裁兵”列入谈判议题，而南方政府不管怎么说是个弱者，更愿意完整地采纳“废督裁兵”这个口号，将这个口号列入谈判的正式议题，以此迎合或者说回应民间声音。
然而，由于南北两个政府各有心计，各有目的，南北和谈很快破裂，废督裁兵也就暂时搁置。至1920年4月23日，浙江督军卢永祥为了南北和谈的僵局，以北洋督军的身份公开昌言废除督军，并宣布“取消督军，请自永祥始”，明确承认督军政治是时局转危为安，是中国能否步入民主政治的关键。卢永祥的宣言自然引起各方震动，因为只有督军本身意识到督军政治的局限性和问题，只有督军本身愿意废除督军，才意味着废督的真正可能。
卢永祥的呼吁获得了各方面的积极回应，浙江省议会最先表示赞同，以为卢永祥的这个建议合乎民意，应该尊重，应该支持。孙中山也对卢永祥的这个建议给予很高评价，以为是民国从军阀政治走上民主政治的第一步。同属南方军政府系统的云南督军唐继尧于6月1日宣布自废督军一职，调整云南省内行政架构。21日，同样属于南方军政府系统的贵州督军刘显世紧随其后，通电宣布废除贵州督军职务。所以，作为北洋系的浙江督军卢永祥所发出的呼吁，却受到南方革命势力的欢迎和回应，而北方，在北洋系，由于卢永祥的这个建议来得实在有点突然，北方各省督军出于各方面的原因，并不能完全赞同，北京政府也就无法就此作出决定。废督裁兵不仅在北洋系落空，而南方革命党人匆匆忙忙宣布的废督方案，实际上也只是换汤不换药，督军变成了总司令，依然是该省权力的中心，依然拥有至上的权威。
