“杂之以处而观其色”，就是将考察对象放在男女杂处的环境里，看他是否好色。色在这里专指漂亮的女子。爱美之心人皆有之，但陷入“温柔乡”而不能自拔、于国于家于身都不利。不少封建统治者沉湎于女色不理政事。白居易在（（长恨哥欠》中曾咏叹“君王从此不早朝”的景象，唐玄宗宠幸杨玉环姐妹三人，导致“六军不发无奈何”的局面。汉成帝因沉溺于飞燕姐妹的“温柔乡”，终累死榻上。
中国自古就有“红颜祸水”一说，人们认为，温柔乡是英雄冢。事实上，倾家败国、自取灭亡，也常常和女色联系在一起。周幽王烽文戏诸侯的故事就是因沉湎女色而误国的最好例证。
周幽王时，褒地的人有罪，就把一位叫褒姒的女子进献给幽王，幽王很宠爱她。褒姒不爱笑，幽王用各种方法取悦她，还是不笑。最后，幽王终于黔驴技穷，不得不张榜悬赏：谁能让褒姒笑一笑，就赏千两黄金。
人们争相献计献策，可是那些办法并不能让褒姒笑，只能使她生气。倒是有一个极会奉迎的奸佞小人出了个主意，他让幽王点燃烽火台，等诸侯们的兵马来到，看到并无敌兵，就会垂头丧气地乱哄乱窜，褒姒看到那种情景，肯定会笑的。
可是，烽火并不能随便点。只有当外敌进犯时，才能举起烽火，用来招集援兵。但幽王为博美人一笑，还是听信了谗言。
骊山下有二十多座烽火台，周幽王带褒姒来骊山这天，周幽王的叔叔郑伯友知道了此事，怕扰乱军心，失去诸侯的信任，就赶来阻止。周幽王反而振振有词，认为通过放烟火解闷是件微不足道的事。就这样，周幽王终于点燃了烽火。邻近的各小诸侯急忙带兵赶到都城镐京，听说大王在骊山，又急忙赶到骊山，可一看不像打仗的样子，根本没有任何敌情。周幽王站在高台上对他们喊：“你们辛苦了，没有敌人，你们回去吧”"诸侯们被如此戏弄一番，十分气愤，他们的兵马也像无头苍蝇一样在骊山下嗡嗡乱转，各诸侯国不同的旗帜和军服交错混杂，显得十分滑稽。褒姒看到这种场面，真的冷笑了一声说：“亏你想得出这种主意！”，后来申侯因为幽王宠幸褒姒、废除了申侯以及太子宜臼。以此来勾结犬戎攻打幽王。幽王于是又举起烽火招引援兵，但这次诸侯们却以为和上次一样而没有来。于是犬戎把幽王杀死于骊山脚下。
后人皆把周的灭亡归罪于褒姒，正如《小雅·正月》
里所云：“赫赫宗周，褒姒灭之。”但古今中外，因贪色而败国丧身的确实很多，可那是咎由自取，板子是不能只打在女子身上，因为女子在更多的情况下是受害者。“天作孽，犹可恕；自作孽，不可活。”历史终究是历史，只能作为教材，给后人指路，为人提醒，若等铸成大错后再去思考恐怕为时已晚。
关于欲念上的事，绝对不要跌人其中，否则一味贪图享乐，便坠人万劫不复的深渊而不能自拔。一个人应有自制能力，抗拒欲念的诱惑。常言道：“英雄难过美人关。”人生中要经过几道关，金钱关、权力关、美色关就是其中的代表。能否过这些关，就看一个人的素质如何、品质如何。品质高尚、素质较好的人一般来说都能过好金钱关、权力关和美色关等；但也有一些意志薄弱者，思想素质较差者，一般来说是难过这些关的。
我们不反对男女间的正常往来和正常相处，我们也反对把男女只要在一起就是视为关系不正常。男女之间的正常关系是有一定的界限的，超过了正常的界限就是不正常的关系。如出现了第三者插足，出现了婚外恋、外遇等现象，就是不正常的关系。尤其是好色之徒或卖淫嫖娼者，更是道德的败坏者，这样的人将其男女杂之以处，就更能看出好色的现象，而那些思想道德好的人，能够处理好男女之间的正常关系，决不会因好色而摔跤。所以，识人，采取“杂之以处而观其色”是为上策。
