首先，這些人是無用的。“磐石千裡，不可謂富；像人百萬，不可謂強。石非不大，數非不眾也，而不可謂富強者，磐石不生粟，像人不可使距敵也。今商官技藝之士，也不耕而食，是地不墾，與磐石一貫也。儒俠，勿軍勞，顯而榮者，則民不使，與像人同事也。夫知禍磐石像人，而不知禍商賈儒俠為不墾之地，不使之民，不知事類者也。”（《顯學》）是說磐石不能長出糧食，草人不能抵御敵人。商賈技藝之人，儒（“儒”這裡應該包括諸子百家）俠一類的人，都如磐石和草人一樣，再多也沒有用處，因為他們不生產糧食，不能到前線打仗。
其次，如果提倡和獎勵類似上面的五種人士，那就是懲罰勤快之人，而獎勵懶惰之人，其結果是國家滅亡。“今有人於此，義不入危城，不處軍旅，不以天下大利易其脛一毛。世主必從而禮之，貴其智而高其行，以為輕物重生之士也。夫上陳良田大宅，設爵祿，所以易民死命也。今上尊貴輕物重生之士，而索民之出死而終殉上事......