曖昧な関係で先が見えません

はじめまして。宜しければご意見をお聞かせください。

私は、独身30代後半の女性です。
ネットで偶然知り合った一人暮らしの独身30代後半男性と知り合い約1年になります。
遠距離なのですが、2度直接会って楽しく遊びました。（2度とも泊まりでしたが、別々です。）
最初の半年間は、お互い恋人なしの一人身ということもあって、恋愛相談や過去の話をしていたのですが、
一度目に直接会ったときに私が彼に恋愛感情を持ちました。
それで、2度目に会った時に「つきあって下さい」と
私が告白しました。

返事は「期待にこたえられない」だったので、「あきらめます」と言ったのですが、
振られる理由を知りたかったので聞いてみました。
理由は、彼は今までに、2人つきあった女性がいたのですが、
2人とも、別れてからも、ずるずるつきあってしまって、
特に2人目の彼女とは8年近くセフレのような状態が続いていたそうです。
（その間、正式な彼女はいませんでした。）

自分でもロクでもないことをしてると思っているそうで、
「君（私）がいい人だとわかっているのに、そんな非人道的な目にあわせられないから、
僕は自分を君におすすめできない」と言いました。
あと、「もう自分は枯れてる。誰に対しても、気持ちが盛り上がらないんだ」とも言われました。

私は、どうしていいかわからなかったので、
「とりあえず、このまま私と会っていってみる？気持ちが変わるかもしれないし」と提案してみたら、
「会おう」ということでした。

客観的に見て、私はこのまま、彼を待ってていいのでしょうか？
私は彼にからかわれているんでしょうか？

私も今まで一度しか男性とつきあったことがなく、恋愛経験があまりありません。
そのためか、彼の考えてることがよくわかりません。

先月、私の誕生日だったのですが、彼からはメール1本ありませんでした。
後日聞いてみると、誕生日は気づいてたそうです。
すごくショックで、その日は携帯を握ったまま寝てしまいました。

イベント事に興味のない人なのかなあ？とも思ったので、
「今度のクリスマスに欲しいものある？」と聞いたら、
彼がすごく驚いていて、
「クリスマスなんか何年ももらいも、贈りもしてないから、わからない」と言われました。
なので、「一万五千円くらいのもので。。。。」と言ったら
（私は数年間うつ病で、去年からようやく、3.4時間のバイトにいけるようになったばかりで、
お金があまりないので、この額が精一杯でした・・）
「そんなのしなくていい。この間くれた手作りのクッキーがいい。」と言われました。
（2度ほど、手作りのお菓子を贈っています）

正直、つきあってないんだから、
プレゼントのやり取りなんか嫌だってことなんだろうなあ・・・
と思い、今回もかなり凹みました・・・・。
今の状況はこんな感じです。