杨露禅回到屋内，想到不定何时还会有人来找麻烦，心中烦闷。于是找张四胖子，对他讲了在永年县伤人之事，自认为总得防一下，不如离开此地为好。
张四胖子感到很惋惜，想到两个儿子才学两年多，如果学成了该多好。于是对杨露禅说，如果能到四爷那里就行了，我去活动一下，找大管家王兰亭说说，或许能行。
咸丰年间，端王称四爷，肃王称六爷。杨露禅若能到端王面前教拳，问题就解决了，绝无后患。端王府的总管王兰亭特别喜爱武术。
经张四胖子推荐，王总管又从中说合，杨露禅真的被四爷看中了，便到端王府教拳。总管王兰亭精明能干，个子高大，身强力壮。
杨在教端王练拳时，王兰亭就在一旁跟着学，而且杨露禅每次都用王兰亭试手，挨打的是王兰亭，但他也就因挨打而慢慢地领会了太极拳法的精华。
在端王的安排下，杨露禅开始充任旗营武术教官。所教之拳术，在当时不叫太极拳，而叫作“绵拳”，只教旗人不教汉人，旗营中也是只教近八旗，不教外八旗。
那时的旗营分为东八营和西八营，东八营是善扑营，练摔跤，西八营多是提笼架鸟的，体质较差，练绵拳。
当时有很多王公子弟也来学拳，然而大多数人怕苦而学艺不精，仅有时贝勒之子时绍南和武状元出身的将军岳柱臣得太极真谛，并且正式拜师杨露禅。
旗营下级军官中有三人得太极真传，此三人即凌山、万春、全佑，三人各得所长，凌山善发劲，万春善刚劲，全佑则善柔化。
因碍于旧的等级观念，三人不能与贝勒子、将军等人称兄道弟，故杨露禅令此三人拜其子班侯为师。
后来，时绍南因出天花丧命，岳柱臣在中俄边境战争中阵亡。杨露禅再无心教拳，遂辞去武术教官之职，离开了旗营。
杨露禅与其子班侯、建侯，其孙澄甫三代人在北京教拳，对传播太极拳功劳极大。
武术大师王培生先生早年与天义顺酱菜园老板海淀张四胖子的后人有交。亲听其讲述杨露禅初来北京，先在张家落脚避难，而后被推荐到端王府教拳等情况。
太极宗师--杨露禅太极泰斗吴图南先生在《太极拳之研究》一书中也有详细的描述，与王培生先生所讲大同小异，只在个别细节上略有出入。
1924年，吴图南先生曾任教于北京西山万安小学，因而有幸结识了原天义顺御酱园张凤歧(即张四胖子)的后人张伯允。吴听张讲杨露禅初来北京即落脚张家教拳之事。
吴又从张先生那里得到许多杨露禅在张家教拳的资料，其中珍贵的是《张氏随笔》(乃天义顺酱园老板与把式侯德山一同跟杨露禅学拳的笔记)。由此可见，这段轶事具有极高的历史真实性。
天赋异禀、万中难求
自幼好武，因家贫，迫于生计，在广平府西关大街中药铺“太和堂”中干活。这药店为陈家沟人陈德瑚所开。
恰巧这段时间陈长兴借陈德瑚大宅院中授徒。杨露禅在陈氏师徒练拳时，在一旁观看，用心记下某些招式，无人时便私下练习。
后被陈发现，叹其为天赋异禀之武学奇才。然而，陈长兴果然是大格局的人物，不但没有怪罪他偷学，反而大胆摒弃门户之见和江湖禁忌，和陈德瑚商量，准其在业余时间正式学习陈家沟拳术。
这样，杨露禅才得以正式拜陈长兴为师。
这便是民间传说中《杨露禅陈沟偷拳》的真貌。传说中杨露禅为了学习太极拳，假装哑巴乞丐，混入陈家做家丁，暗中学会了太极拳。
基本上，这种说法只是不合逻辑的传言加工。如果武术真的只要在旁边偷看就能会能精，那么我们只需要到公园去看别人打拳，就能学得盖世武功，实乃滑天下之大稽也，亦有诋毁杨氏太极拳史的嫌疑。
比较可能的说法，可能是杨氏在旁窥拳后，自己苦练，后来为陈长兴所赏识，进而亲自授拳，而卓然一家。
杨露禅三下陈家沟
杨露禅第一次去陈家沟习武，碰了很多次壁，后只好去陈长兴家当佣工，经过持之以恒的决心，感动了陈长兴，后收为徒弟。
杨露禅第二次去陈家沟，杨露禅自河南温县陈家沟返回永年之后，一下子把整个广府城给轰动了。
