从典籍的记载来看，一个男人但凡觉得“女色”要紧了，上足以国破家亡，比如桀纣之流，代表人物众多；下可能身名俱败，比如焦仲卿、钱谦益之流——焦仲卿要是不那么迷恋刘兰芝，他老娘就不会对儿媳妇那么刻薄，两人也就不至于殉情自杀；钱谦益更糟，从“我本欲殉国，奈小妾不与可”到“人生忠佞看到头，至竟延龄在何许”，搞得生前死后都凄惶不堪。
所以，聪明的古代侠客义士们，常常“于女色上不十分要紧”。当然不仅仅是侠客义士，更多的人，只要他够聪明，就不会让自己沉溺于女色——不过，那些自以为自己怎么折腾都不会国破家亡、身名俱败的主儿除外，因为他们干那些事儿时，一手举着镶嵌利刃的大棒、一手拎着红红绿绿的带秧胡萝卜。
李宗吾手上只有书和笔，没有大棒和胡萝卜，所以，他是个非常规矩的聪明人，自打青春年少开始，就“于女色上不十分要紧”。关于这一点，最早的证明便是曾经很后悔自己没当上罗家女婿。
在茂源井刘家私塾读书期间，老师们有什么耽误，就会请一位罗二老师来代课。罗家两兄弟都是李宗吾的父亲静安先生的好朋友，当地人按照排行称他们罗大先生、罗二先生。
白天，这位罗二先生吞云吐雾地抽鸦片烟，学生背书的时候也不起来，就那么侧躺着听学生背四书五经，谁背错了一个字他都知道；晚上，这位罗二先生把学生安排在灯下亮处看书，他坐在暗处讲解，讲一段便问学生：“是不是这样？”学生开始还看看书，对照一下，回答：“果然这样。”后来知道不需要看了，就直接回答“是这样”。教学生读八股的时候，罗二先生会把以往的范文默写出来，等学生读熟了，再默写一篇出来。罗二先生的这些才华，让少年李宗吾佩服至极，也为他后来想做罗家的女婿打下了思想基础。