孤立他人者担忧害怕的事情存在多种情况。他们可能害怕被孤立者的反击。当被孤立者凭借自身能力或借助外部力量强大起来，孤立者担心会遭到报复，比如在工作中被孤立的员工努力晋升后，可能在权限范围内对曾经的孤立者做出不利安排。
孤立者也会害怕自己行为被曝光。孤立行为往往不光彩，一旦被大众知晓，他们自身形象和声誉会受损。在学校里孤立同学的学生，若孤立行为被老师和家长发现，会受到批评教育，在同学间的口碑也会变差。
此外，孤立者还担忧孤立行为的连锁反应。他们担心孤立他人会引发周围人的不满和反感，导致自己也被群体疏离。原本参与孤立的小团体成员，可能因看不惯孤立手段而离开，孤立者最终落得孤家寡人。
