扫地僧是逍遥子儿子，是逍遥派正宗嫡传人物，只不过年纪比三老小10来岁。
大师姐童姥出场96岁，二师兄无崖子93岁，三师姐李秋水91岁，扫地僧83岁，小师妹81岁。
此5人互为师兄弟妹，同为逍遥子弟子(其中扫地是儿子，李秋水和小师妹是亲姐妹)。
一开始扫地和小师妹10来岁时，无崖子20来岁跟同为20来岁的童姥和李秋水纠缠不清，始终没有确定关系，后来童姥在36岁时正在练八荒*合六**唯我独尊功时被李秋水暗算，中了暗算的童姥每隔30年必须要返老还童一次，而且身子长不大。此时无崖子选择了和李秋水结为夫妇。跟李秋水结为夫妇后不久发现自己更喜欢自己小姨子，此时小姨子已成人。
逍遥子最初是要撮合自己儿子和小师妹的，所以无崖子在发现自己更喜欢小师妹后，也没有表现出来。
没过多久，逍遥子离世(41年前)，在下葬时扫地僧发现了师兄和小姨子暗生情愫，
而自己颜值文才武功都不如师兄无崖子。为了成全师兄师妹，选择坦然退出，并且在当年选择了在少林寺出家。
那年扫地僧是41岁，是带艺剃度拜在当时主持灵门大师门下，灵门觉得其真心遁入空门，又是带艺投师，于是安排其在藏经阁做图书管理员，这点连当时20来岁的一众玄字辈少林和尚包括玄慈玄悲玄苦玄难等均不清楚此事，从年龄上来讲扫地是玄字辈师兄，但拜师晚，反而成了玄字辈师弟。此事直到灵门圆寂也没有交代给大家包括玄慈方丈。
而无崖子在逍遥子下葬后，也没有辜负小师妹，但也没脸在总部继续当逍遥派掌门人，于是带着小师妹和掌门指环来到大理无量山中，在剑湖宫中为小师妹量身定做了一个玉石雕像和一副随身携带的卷轴画，一住就是12年，不仅把师傅搜集来的各门各派绝学从总部搬到了剑湖宫，而且经常在剑湖宫中练习各门派剑术，所以无量派东西两宗经常看到对面无量玉璧上有仙人在舞剑，引发了两宗掌门人每隔5年争夺入住剑湖宫前台资格。
在无崖子和小师妹入住无量山之时，武功不如童姥的李秋水，失去了无崖子丈夫这个靠山后为了防止童姥报复，带孕躲进了西夏皇宫成为了皇妃，想依托皇宫的庇护来抵抗童姥，终于平安生下了李青萝(王语嫣生母)，但在3年后还是被童姥识破踪迹找上门来，此时李秋水二孕在身，童姥在李秋水脸上划了几十刀后就放过了李秋水，从此李秋水开始终日蒙上面纱，名曰遮挡盛世容颜，实则遮挡毁容的不堪，终于生下了次子(梦姑父亲)。
童姥毁掉李秋水容貌后担心自己返老还童期间李秋水找自己报复，于是在天山缥缈峰寻到据点，并网罗了江湖上一众门派三十六洞和七十二岛，其中就包括无量剑派，神农帮，区洞主，钦岛主，乌老大，桑土公，珠崖双怪，不平道人，九翼道长，崔绿华等人，为了让这些门派为自己效命，同时给了他们种下生死符，每年给一次解药。在童姥的第二次返老还童之际(66岁)，由于李秋水没有找到缥缈峰位置而成功躲过。
终于无崖子和小师妹在无量山中住腻了，在63岁那年，趁着童姥返老还童之际，无崖子和小师妹重新选择归隐在南阳恶霸吕庆图家附近一片*庄大**园中进一步钻研武学，并且收了两个弟子苏星河和丁春秋。在75岁那年用算珠子教训了不可一世的伏牛派的崔百全(由于逍遥派驻颜有术，此时70多岁的无崖子和60多岁的小师妹在崔百全看来是40上下的书生)。
不久，小师妹故世，无法找童姥报复的李秋水为了报无崖子移情别恋之恨，苟合丁春秋把无崖子打落聋哑谷，依靠大弟子苏星河奇门布阵，并且用言语挤兑住了丁春秋躲过杀身之祸，但无崖子却也落了个终身残疾，无奈设计了个珍笼残局让苏星河在擂鼓山设擂招募第三个弟子，直到虚竹的出现。
童姥则继续在天山缥缈峰掌管着江湖上一切动向，直到自己96岁，遭到了36洞72岛的反噬，被36洞72岛之人绑到了万仙大会中，并且被李秋水识破踪迹，跟踪到此直到被无崖子传功的虚竹及时赶到救走躲到西夏皇宫的冰窖中。
而此时的扫地完全不了解江湖上一切世事，只是在每日读经和扫地中度过了42年，不知不觉神功附体。
直到萧远山父子，慕容博父子和本大师出现在藏经阁准备大干一场时出手化解了这场30多年的恩怨。