Sí, soy de la misma opinión, pero a veces por lo que sea no te queda otra que relacionarte en un grupo. Al final lo mejor es hacer lo que te haga sentir bien :).
Me sucede lo mismo que a tí, no me comporto igual estando en grupos grandes que con una o dos personas. Me empiezo a sentir muy incómodo y acabo hablando poco o nada.