Tous ? Pas si sûr... (Proudhon, Louise Michel, Emma Goldman, Gracchus Babeuf...) Une majorité sans doute. Mais le terme "classe privilégiée" n'est pas forcément juste. Au XIXème s., les "privilégiés" sont les membres de l'aristocratie... mais il existe des riches non privilégiés par le droit (bourgeois) qui contestent les privilèges de l'aristocratie (d'où la révolution française)... la bourgeoisie a donc un rôle révolutionnaire pendant un temps. Ce qui peut expliquer que certains bourgeois soient attirés par les théories égalitaires.
Il existe aussi une couche de prolétaires ou artisans/paysans en voie de prolétarisation, qui parviennent à un travail intellectuel intéressant par une démarche autodidacte (Proudhon est l'exemple le plus connu, pas le seul). Mais ça implique des circonstances favorables, qui donnent les moyens et le temps de se consacrer à ce travail théorique. C'est peu fréquent mais pas aussi marginal qu'on pourrait le croire.