もしかしたら、少し「上から目線」の多い人だと思われてるかも。社会的な価値観やポリシーが正反対なのかもしれません。相手は、もっとカジュアルな態度の方が好きなのかも。