Warum ist er verwerflich,

Es wurde doch gar nicht gesagt "Wenn XY kommt, komme ich aber nicht", oder?

Sondern: Ich schaue erstmal, wer kommt. Komplett anderer Aussage!

Immerhin hat man auch einen gewissen (nicht gerade kurzen) Weg zu dem Treffen zurückzulegen, der Kosten und Aufwand mit sich bringt.
Wer da sagt, er würde auch kommen, wenn letztendlich alle interessanten Leute abgesagt haben, ist entweder wenig im realen Leben integriert (fehlende Alternativen) oder nicht ehrlich.