何群好學嗜古，喜歡激揚議論，雖業進士，非其所好。宋仁宗慶曆年間，石介在太學，何群以石介為師，被推為學長，他與人議論，常堅持己見，同舍稱他為白衣御史。何群刻苦讀書，著書數十篇，曾經請恢復古衣冠，又上書稱賦文害道，被黜出太學，于是不複舉進士。嘉祐年間，龍圖閣直學士何剡向宋仁宗上奏其事，賜號「安逸處士」。