Sous le peu de vêtements car il y a au moins deux pièces…(sous-vêtements et un pantalon et un « haut »…).
Il en va différemment si vous faites référence à un seul vêtement : vous écrirez :

vêtu(e) d’un seul pantalon, j’ai très froid….
vêtu d’un unique vêtement, …

Attention à la règle d’accord du verbe avec « le peu de »
Le peu de vêtements que je porte me protègent quand même = positif on accorde au pluriel avec vêtements.
Le peu de vêtements que je porte ne me protège pas : on accorde le verbe avec « peu » au singulier.