从古至今，瑶人拳自称为“瑶人拳”，其源头未详。然而，这一武术却是基于当地特有的自然环境和生活习性而诞生的。瑶人的身材较矮，小巧灵活，他们居住在山区，环境险峻、气候恶劣。房屋低矮，没有专门的厨房，因此做饭取暖都要靠火塘进行。这不仅产生了大量烟雾，还使得通风条件差，对眼睛造成极大困扰。在这样的环境中，瑶人们学会了蹲着才能睁眼，站立则被熏得泪流满面，看不见任何东西。
据说，这种特殊的生活方式最初是为了防止土匪入室抢劫。当强盗进门时，被熏得目盲，而蹲下的瑶人却能清楚地看到他们，从容拿起刀或柴棒敲断强盗的胫骨。随着时间的推移，这些经验被总结并融入到拳法之中。因此，原始的瑶人拳特点之一就是先蹲下来，然后缩起身子钻进去。
技术方面，则来自于打猎时对付野兽的手段。如果猎物柔弱，就用撂倒再擒拿捆死；如果凶猛，则痛下杀手直接报废。此后这些技能被用于部落间的人与人的战争中，最终成为了秘传技艺。
瑶人们并不刻意练功，他们长期生活在山里，不断打猎劳作，并通过日常活动学习武艺，如舂米练脚力筛米成乱环决等。在自然界中寻找灵感，如猿猴般机敏，有虎豹之威即可成为高手，即便是为了传承，也只需要简单单操功架，没有繁复套路。
据族谱记载，徐氏祖上原籍江西，为朝廷武官。在明洪武年间，当地民变爆发时，他被派遣作为平乱第四路先锋领兵驻扎黎平府，从此定居繁衍子孙。到了清代，他家族已弃政从商，并成为大族。在接受了瑶人的传授之后，将家传战场上的武功融合于其中，加以修整完善，以“逢门拳”命名。这一变化，使得逢门拳保留了原有技术，同时发展出了吞吐沉浮、闪展腾挪、贴身夺位等新招式，以圈手为母法配以乱环诀，可以千变万化。而步法则以身带步（圈步）为主，无需复杂套路，只有单操功架。此外，它也保留了一种棍法，但同样没有多余套路，只需单纯实践就足够。
综上所述，逢门拳并不仅是一种技击艺术，更是一种深厚文化底蕴和丰富历史积淀，是一种将生存技能转化为战斗技巧的一体两用理念，所以它既不会表演，也只会在必要时施展出最致命的一击——只有杀敌，不会表演。
