林遠圖是辟邪劍法的創辦人，但是當初林遠圖是根據六脈神劍才領悟出辟邪劍法，欲練此功還要越過自宮這一門坎，假如林遠圖自宮練劍為何他還會繼續有小孩呢?林遠圖早前是福建省莆田少林寺紅葉禪師的徒弟，法名渡元。那時候紅葉禪師擔憂六脈神劍會傷害武林，因此 將秘笈損壞，接著派渡元前去華山向岳肅和蔡子峰表述狀況。實際上渡元早已擅自偷窺了秘笈，并且將內容抄在了自身的僧衣上，華山一行后渡元再也不會返回少林寺，只是給紅葉禪師寫了一封信，說自身準備還俗。兩年后，武林上便出現了一位大神，憑著辟邪劍法名震江湖，還開創福威鏢局，這個人便是渡元禪師，還俗后更名林遠圖。那時候林遠圖的辟邪劍法早已十分得了，那他到底是怎樣結婚生子的呢?

有些人說林遠圖是在自宮之前便擁有妻室，也有人覺得林遠圖的大兒子并不是他親生父母。對于前一種叫法實際上有一定概率，盡管林遠圖先前一直是佛門弟子，但在寺外也許早就定好婚緣。由于林遠圖還俗之后做的還是俠義天下的事兒，證實他并沒有忘記老師傅的教導，林遠圖偷師劍招也不是為了更好地獨霸江湖，只是創建鏢行能讓親人日常生活的更平穩。因此 我們可以推斷，林遠圖早已有還俗的準備，僅僅突然冒出一個能使他觸碰到六脈神劍的機遇，因此 才造成自此的變化。

這般來看第一種概率是創立的。那第二種概率有木有很有可能呢?回答也是有可能的，并且概率還會繼續稍大一些。林遠圖在外面要是沒有另一半，那他應當便是不愿再次當和尚，只是根據還俗過上好日子更自由的生活，而辟邪劍法就是他立足于的成本。那時候林遠圖肯定是迅速的研修劍招，期待可以早日做好了，因此 壓根沒空在意兒女私情。但林家自始至終必須繼承者，因此 就收養了大兒子林伯奮和次子林仲雄。

林遠圖直至七十歲才退出江湖，把福威鏢局發送給了次子林仲雄。兒子林伯奮考入武舉，這時能夠說成林家最頂峰的時刻，不但有些人做官，鏢行的做生意也是蒸蒸蒸日上。但林遠圖的好多個大兒子武學都比不上他，但是鏢行的知名度和林家的辟邪劍譜早已無人不曉眾人皆知，別人也害怕隨便和福威鏢局對著干。直至林震南對接鏢行，才暴發了林家被滅口的血案。

實際上有一點十分怪異，仿佛林家除開林遠圖，他的子孫后代也沒有學好詳細的辟邪劍譜，因此 整體實力一直提不上。覺得她們更好像商人，因此 余滄海才還有機會屠殺全部林家。那到底是他們自己不愿自宮學劍，還是林遠圖不許她們學呢?