とっさの一言さん  男性  56歳

「一週間あいだがあいてしまう」という発言（Ａとします）と、
「次回の誘いがない」ということ（Ｂとします）を分けて考えてはどうでしょう。
結論から言うと、Ｂが彼の本音のように思います。

相談者さんはＡを重く見ているようですが、
これはその場の会話の流れからとっさに出た言葉で大きな意味はないように思います。
たとえば、相談者さんが指定した日は彼にとり都合が悪かったので、
「都合が悪い」と言う代わりにＡと発言したとか、そういう感じじゃないかしら。

あるいは、彼はＡの時点では再び会いたかったが、時間が経つにつれ、それほど会いたくなくなった可能性もあります。

これに対しＢは一瞬の出来事ではありません。長い時間にわたる出来事です。
ゆっくり考えたうえでの行動ですから、こちらが彼の意思じゃないでしょうか。