Les dictionnaires et autres ouvrages de référence ne semblent pas capables de faire la différence entre une locution (adverbiale ou prépositionnelle) et un nom composé. On y trouve donc de tout sans principe fédérateur pour de nombreuses associations de ce type.
Ma recommandation constante est de ne mettre des traits d’union que pour les noms composés (un tête-à-tête animé) mais pas dans les locutions (en tête à tête).
Il y a des dizaines de cas similaires que j’ai déjà évoqués sur ce site (de à(-)peu(-)près à sur(-)mesure ).