彼がふとした時に言った一言がとても気になってます。

書かれているエピソードから推測して、語彙が貧弱すぎると判断いたします。口喧嘩の際の「見下しているから」といった内容も事実だとしても私なら口篭もって回答しないか、「お前は俺にとって特別の人だから」だからと後々のことを考慮した回答をするでしょう。

http://q.hatena.ne.jp/1213120134#a834149

否定的な書き方だからかレスが付いてないけど、参考になる意見だと思う。