Wie Dir schon Rolf geschrieben hat ist diese Abfrage sehr „teuer“. Zusammen mit der anderen Frage eines „Jörg“ nach einer Empfehlung eines Manages Servers ergibt sich das Bild, dass eine Optimierung angebracht ist.
→ Teile die Benutzer in einer weiteren Tabelle Gruppen zu und trage die Gruppe in die - dann indexierte - Spalte ein - und frage dann nach dieser. Natural Joins oder Left Joins sind recht fix.