Das Problem ist, dass Du ihm bei Eurem ersten Treffen vollkommen auflaufen hast lassen. Du hast ihm zum einem klipp und klar signalisiert, dass Du nicht an ihm interessiert bist und zum anderen wird Du durch Dein "nicht-Flirten" vermutlich auch nicht besonders attraktiv gewirkt haben, ich mein, welcher Mann will schon eine Frau, die sich völlig asexuell gibt. Und natürlich geht ein Mann, wenn er eine Abfuhr kassiert, erstmal auf Rückzug - erst recht in einem Arbeitsumfeld.
Zum "Affen" hast Du Dich schon gemacht, weil Du - zu Deinem eigenen Schaden - Dein Interesse und Deine Gefühle verleugnet hast. Jetzt willst Du Zurückrudern und klar musst Du jetzt - bei schlechteren Erfolgsaussichten - viel deutlicher und hartnäckiger sein, als das vorher der Fall gewesen wäre.
Also erstens: er hat Dich eingeladen. Alles was Du getan ist war zu sagen "können wir", was er nach den Erfahrungen Eures ersten Treffens nur als neuerliche Abfuhr werten kann. Er wird den Teufel tun, sich auf so eine laue Ansage hin zu melden - er hat nämlich auch keine Lust sich zum Affen zu machen.
Und zweitens, was Du jedenfalls kriegst, wenn Du ihn wirklich einlädst - und zwar ganz konkret mit Ort und Zeitpunkt (plus Ersatztermin) - ist Information: Wenn Du ihm ehrlich und unmissverständlich Dein Interesse signalisiert (die üblichen Zweideutigkeiten reichen in Deinem Fall, aus Deinem eigenen Verschulden, nicht mehr aus) dann verschaffst Du Dir jedenfalls Klarheit und weisst Du wo Du bei ihm stehst.
digitus