Dans le cas précis, vous accordez les mots frère et sœur en fonction de leur nombre respectif.
Cela étant, dans la forme générale courante on se soucie peu du nombre de chacun  si cela ne présente pas d’intérêt particulier : Il est venu avec tous ses frères et sœurs (sinon Il est venu avec son frère et ses sœurs).