自幼饱读诗书，满腹经纶，却无意仕途。裴垍欲荐其入朝，遭拒。为避免朝廷延揽，遂决意远走他乡，步李泌后尘奔南岳而来，正值韩愈途经衡阳、游览石鼓山、吟下千古绝唱《题合江亭寄刺史邹君》不久，受韩诗感染和吸引到石鼓山赏游，见江山旖旎，林木葱郁，湘江、蒸水、耒水三江环绕，千里烟波尽收眼底，顿觉心胸为之一振，再也不忍离去，遂结庐读书其上，创建中国古代最早的书院，是谓石鼓书院之始建。时任衡州刺史吕温公务之余“常往访之”，与李宽及诸生文咏唱和。《全唐诗》收录了吕温《同恭夏日题寻真观李宽中秀才书院》：“闭院开轩笑语阑，江山并入一壶宽。微风但觉杉香满，烈日方知竹气寒。披卷最宜生自室，吟诗好就步虚坛。愿君此地攻文字，如炼仙家九转丹。”明万历中（1587～1598），与韩愈、李士真、周敦颐、朱熹、张栻、黄干同祀石鼓书院七贤祠，世称石鼓七贤。