耶溪社区成立于2004年5月份，前身为北门居委会，地处城北老城区，辖区面积约0.3平方公里，辖区内有大小机关、企事业单位16个，居民户数2159户，人口7706人，其中常住人口6354人，暂住人口82人，挂靠户1343人，划分网格7个，设网格管理员7人，楼栋长36个，社区现有党员数62人，设立总支一个，下设三个支部，现有工作人员7名，残联专干一名，另聘用保洁员7人。
耶溪社区与流源社区、崇文社区、桂花社区、城南社区、花门楼社区、窑前社区、荷舍村、大桥村、敖桥村、茶头村、良岗村、良田铺村、良头村、樟陂村相邻。
耶溪社区附近有渊明湖水利风景区、南屏公园(省级森林公园)、洞山禅林、宜丰五峰山、黄檗山等旅游景点，有宜丰蜂蜜、宜丰竹笋、宜丰根雕、罗酒、宜丰松肉等特产。