自私的人最怕别人以以下几种方式对待他们：

1. 缺乏信任：自私的人通常只关心自己的利益，不顾及别人的感受。如果别人不信任他们，尤其是在工作环境中，他们很难得到同事间的信任与合作。

2. 孤独：由于自私的行为，他们可能会在家庭、朋友交往中被认为是自私的人，最终被孤立。孤独会对他们造成极大的打击。

3. 失去机会：自私的人在工作中往往只关心自己的利益，不顾及团队的利益，这会使他们很难得到工作机会和晋升机会。

4. 明确的边界：面对自私的人，建立清晰的边界是非常重要的。通过实际行动让他们明白交往是互惠互利的过程，而不是单方面的索取。

5. 不轻易暴露弱点：自私的人往往很敏感，怕别人利用他们的弱点。不轻易暴露自己的弱点或意图，可以保持一定的主动权。

6. 不轻易暴露意图：自私的人往往很谨慎，不会轻易暴露自己的意图和计划，因为他们害怕被别人利用。

7. 不轻易暴露弱点：自私的人往往很敏感，怕别人利用他们的弱点。不轻易暴露自己的弱点或意图，可以保持一定的主动权。

自私的人最怕的是别人以真诚、坦率的方式对待他们，不轻易暴露自己的弱点和意图，同时建立起清晰的边界，让他们明白交往是互惠互利的。