Warum nicht den direkten Weg wählen und ihm einfach ganz offen kommunizieren:
"Ich habe die Dates mit dir sehr genossen. Mir ist nach unseren letzten Dates aufgefallen, dass es nicht so ganz passend ist für mich. Versteh es bitte nicht als Ablehnung gegen deine Person. Du bist einfach nicht derjenige, den ich suche. Ich wünsche dir alles Gute."
Du musst ja nicht bis in das kleinste Detail gehen, warum es für dich nicht für ein weiteres Kennenlernen gereicht hat. Das würde ihn sicher nur zusätzlich kränken. Eine Ansprache, unter Angabe allgemeiner Gründe, fände ich schon fair.