“物以类聚”是一个中性词，表达的意思需要具体看使用的语境，但在日常生活中很多场景下表贬义，形容不好的聚集。常用来指坏人彼此臭味相投，勾结在一起。

如果溯本求源看“物以类聚”的本义或者此语在《战国策·齐策三》中的用法，那么会看出此语并不是贬义词语。“物以类聚”语出《易经·系辞上》中的“方以类聚，物以群分，吉凶生矣。”此中的“方”是办法、做法、技巧；“物”是事物；全句话的意思是：各种方法办法等因种类相同而归为一类，各种事物因种类不同而自然形成分类的群体，彼此利害的调和与冲突，产生吉与凶的现象。后来由《易经》中的这句话派生出“物以类聚”这个成语，表示“各种东西都按种类聚集在一起”。