衡阳是汉族聂姓聚居地之一，皆源于江西，最早迁徙者当在唐末宋初，现有聂姓8万余人，分别分布于衡阳最西端的邵东县水东江（属邵阳）、衡阳县金兰、山水、石坳和桐梓；最北的双峰花门、荷叶（属娄底），

衡阳县金溪庙；衡山县的后山马迹、东湖、新桥、岭坡、前山的县城开云镇、店门、萱洲；

南岳区；衡阳县白鹭坳；

衡阳市的松木塘；衡东的草市、莫井、杨林、新塘、川口；

衡南的花桥、古城、泉溪；

常宁松柏、县城、兰江、白沙；

耒阳太和圩；

祁东白地市；

祁阳南河岭、县城、白水秀才源等