横山建县时间不长。清雍正九年(公元1731年)将响水、波罗、怀远、威武、清平五堡改为县，县治怀远堡，因此名曰怀远县，怀远者，怀柔边远之意也。民国三年(公元1914年)因怀远县与广—西、安徽的怀远县同名，中央政府明令改换县名，依据县境清平堡大墩梁为横山山脉的主峰，其山脉大多东西走向，改名横山县。

　　横山自秦汉以来，一直是汉族与匈奴、鲜卑、党项等少数民族互相斗争、互相融合之地。十六国时，匈奴铁弗部赫连勃勃建立大夏，都城统万(原属横山，现属靖边)，横山为其腹地。隋末党项族一部迁到宁夏、陕北，西夏国的奠基人李继迁即居住在横山境内，并以此为根据地逐步扩充势力。横山古代战场遗址甚多，狄青原据说是宋将狄青跃马挥鞭之地，无定河畔还有西夏和宋永乐大战的遗址。

　　横山人的血液里既有汉族的成分，也有少数民族的成分。其民强悍、粗犷、憨鲁、正直，能吃苦而重义气，敢于斗争，不畏豪强。明末农民起义领袖李自成即是今横山武家坡李继迁寨人，是横山的土地养育的一个英雄。共产党闹革命时，曾有一首民歌唱道：“对面沟里流河水，横山下来些游击队”。横山人闹革命英勇、坚决，出了不少知名人物。

　　横山地薄土瘠，气候异常，十年九旱，灾害频繁，因此易跌年成。《延绥揽胜》云：“其人质朴少文，只知力耕稼穑，务本重农，读书习商，素极拙劣。耘田耕获，操作不分男女，勤苦耐劳，生活衣食简朴。兼以田壤挟沙，地质硗薄，一遇灾旱歉收，辄至背井离乡，携家纷纭南下。延安各县一带，垦荒殖农，现计历年移民于延长、肤施、甘泉、安塞、保安五县最多。鄜县、靖边较次。民国十八年，一部分东移兴县、岢岚者颇众，因艰苦朴实，善阅芜莱，易良田，故到处为土著地主所欢迎，相居年久，大半耕者有其田，由贫致富，略似我国华侨与南洋。近岁约略计算，全县移垦外方者，约占现时男女户口三倍有奇，良非一朝一夕之力所致焉。”直到70年代“农业学大寨”之时，横山群众难以糊口，只好到延安、宁夏、山西甚至甘肃庆阳一带流浪，为榆林地区之前茅。在移往南路(即延安一带)的居民中，也有些很有名气。擅长陕北说书的盲艺人韩起祥，自编了《刘巧团圆》、《翻身记》等书目，成为全国曲艺协会副主席，他即是民国18年由家乡横山迁往延安的。陕甘宁边区时期著名的特等劳动英雄吴满有也是民国17年由家乡横山石湾麻地沟村迁往吴家枣园的。吴满有是种田能手，带头响应毛泽东主席的号召，积极开展大生产运动，三五九旅开荒种地都要请吴满有指导，毛主席的儿子毛岸英从苏联归来，也拜吴满有为师，上吴家枣园的劳动大学。遗憾的是吴满有在解放战争中被胡宗南俘虏，有一段说不清而曲折复杂的历史，因此销声匿迹了。著名的劳动英雄杨步浩也原籍横山。