Il quitte les Éditions Bernard Valiquette au sein desquelles il avait fait son apprentissage pour fonder sa propre entreprise, les Éditions Serge Brousseau, qui serait consacrée exclusivement à des auteurs canadiens.\r\nBien qu'il ait annoncé la publication d'une quarantaine d'ouvrages dans sa maison d'édition, il n'en paraîtra que dix-sept entre 1944 et 1948.\r\nC'est en publiant "Orage sur mon corps" d'André Béland en 1944 que l'éditeur forge réellement sa sa crédibilité au sein du milieu. Il aura la réputation d'être un éditeur non conformiste et publie d'ailleurs plusieurs auteurs ayant fait scandale comme Rodolphe Girard et Jovette Bernier. Il rassemble aussi sous la bannière de sa maison d'édition les auteurs étant vus comme les laissés-pour-compte de la société. Il publie entre autres François Hertel et Jacques Ferron. C'est également à Brousseau que la littérature québécoise doit son premier roman de l'homosexualité masculine, c'est-à-dire "Derrière le sang humain" de Robert Vallières, publié en 1956.\r\nSelon Henri Tranquille, Serge Brousseau comptait vivre aux dépends de nouveaux auteurs qui bénéficiaient de son expérience en payant leur édition et leur publicité.