Вредная экстраполяция

Говорят не надо судить о других по себе. И таки да? Но всегда ли контекст негативный?