且说王飞虎和李达在武林盟养伤，两个多月方痊愈，王飞虎和李泰李达兄弟在武林盟呆久了，便四处混得厮熟。王飞虎是个不喜清闲的人，他每日除了白天练武，夜里便时常聚众跑马射箭、吃酒赌博等，众人喜他性格豪爽，便不分年龄辈分和他称兄道弟起来，一时便弄得武林盟乌烟瘴气，如同玩乐场。林因明看在眼里，他早就想找借口把王飞虎和李泰李达兄弟驱离武林盟，此番正好抓到了他们的不是了。
在武林盟里，众人怕林因明更甚于刘代天。刘代天虽为盟主，但不拘小节、待人宽厚。而林因明则反之，他长期负责处理具体事务，自然养成小心谨慎、严格认真的习惯，甚至近乎吹毛求疵，因此众人在他面前都是小心翼翼的，不也擅越雷池一步。但王飞虎却不吃这一套，他又不在武林盟里任职管事，任是林因明声色俱厉，他都不放在眼里。
于是，林因明便把状告到刘代天那里，谁知刘代天道：“年轻人好玩，那也没什么，我们年轻时不也是这么玩过来的吗？”林因明无话可说，只好严厉约束在武林盟里任职的人。
不过，武林盟本虽是以昂义山庄为基础建立起来的，但昂义山庄仍是昂义山庄，只不过划了些房屋和场地作为武林盟总舵办公场所而已，昂义山庄的人也有一部分没在武林盟挂职。特别是刘代天的那些老友、门客等，这些人大多曾跟刘代天出生入死过，资历老、架子大，散淡自由，一言不合就拍桌子、摔杯子，打架斗殴的事也没少干过，个个跟天王老子似的，只有刘代天才能劝住他们，他们名义上是吃住在山庄，虽平时不参与武林盟事务，却又爱对武林盟的是非对错指指点点。对于这些人，林因明也拿他们没办法，他也曾设法拉拢讨好他们，但这些人个个都是喂不熟的白眼狼，他们眼里只有刘代天一人。因此，后来王飞虎发现武林盟的人叫不动了，就专门只找昂义山庄的人去玩。