然而，如果用理义来要求所有人，那么即使是神农、黄帝这样的圣人，也难免会有不足之处。更何况是舜、汤这样的君主呢？就像飞兔、要褭这样的古代骏马，虽然它们都是优秀的马匹，但也难免会有不足之处。因此，如果只用墨线来取木材，那么就无法建造出宫殿来。
舜曾想让位给他的朋友石户之农，但石户之农却认为舜的德行还不够高尚，于是他带着妻子儿女隐居海边，终身没有再回来。舜又想让位给他的朋友北人无择，但北人无择也认为舜的为人不够高尚，他选择自投苍领之渊而死。同样地，当汤想伐桀的时候，他找卞随和务光商量，但两人都认为这不是他们应该参与的事情。最终，汤和伊尹一起谋划，成功地讨伐了桀。但当汤想让位给卞随和务光时，两人都拒绝了，他们认为这样做不符合道义和廉耻。最终，卞随自投颍水而死，务光则背着石头沉入了募水。
像石户之农、北人无择、卞随、务光这样的人，他们把天下看得像六合之外一样遥远，对于人间的富贵利禄并不感兴趣。他们追求的是高尚的节操和坚定的行为，只愿意享受自己内心的快乐，而不被外界的物质所干扰。他们不会被利益和权势所诱惑，也不愿意生活在污浊的世界中。只有这四个人才能够被称为真正的士人。