好きな人をデートに誘ったのですが…

数年ぶりに好きな人が出来ました。
彼は職場の他部署の人で、友達を通じて連絡先を交換して1度だけ数人で宅飲みをしました。
バレンタインに好きだと言うことを伝え、ホワイトデーにお返しを頂きましたが特に返事はなし。
バレンタイン以降LINEで毎日のようにやりとりをしています。
初めの頃は30分くらいで返信が来ていたけど、徐々に返信が遅くなり最近は半日後とか翌日が普通になっています。
LINEの内容も私が話題を振っていて、彼は返事をするだけという感じで完全に脈なしです。
それでも今月末に彼が県外に引っ越すので、脈なしと分かってはいるけどご飯に誘いオッケーを貰いました。
彼が空いている日を教えて貰い「了解です」と返信すると「予定があった。また確認します」とのこと。
「忙しいだろうし難しければ大丈夫です」と返信してから、既読スルーされています。

男性の心理が全く分かりません。
初めから乗り気じゃ無いなら、断ってくれたほうが良かったです。
このまま好きでいても望みはないですよね？
もう新しい人を探した方がよいでしょうか？