« A défaut de » peut être suivi d’un nom mais pas d’un verbe à l’infinitif et signifie « dans le cas d’un manque de » ou « en l’absence de », locutions qui, elles non plus, ne sont jamais suivies de l’infinitif.
Il faut donc dire les choses autrement. Par exemple : au cas où nous ne pourrions nous rencontrer – puisque nous ne pouvons nous rencontrer
A défaut d’une rencontre entre nous deux pourrait convenir aussi.