すぐ人に見切りをつけてしまう

高３男です。来月から大学生です。
自身の悪い点として、「すぐに見切りをつけてしまう」点があります。

その人のいい面も見ようと頑張りましたが、話すときにずっとスマホを見られていたり、頼んだことをやってもらえなかったり、というのが何回・何日も続くと言葉にはしませんが、内心ムキになってすぐにその人から離れようとしてしまいます。

勿論、自分自身が人に偉そうなことを言える人間ではないのは分かっているのですが、どうしてもこの性格が治せません。人間関係も、極端に仲が良いか悪いみたいな感じです。（悪いというよりはもう自分から関わっていません。）

この性格をよく言えば「切り替えが早い」、悪く言えば「すぐに人を見捨てる」みたいに
なると思うのですが、やはりこういった性格は直していったほうがいいでしょうか？