“两广”这一称谓的由来可追溯至宋朝。当时，宋朝将全国划分为23个路，其中设有广南东路和广南西路。
众所周知，我国的行省区划始于元朝。在元朝统治期间，广西全境以及广东的西部地区均属湖广行省管辖。
1368年，明朝建立后，在元朝行省区划的基础上进行了调整和完善，形成了南北直隶与13个省的区划格局。明朝时期，设立了广东省和广西省。
广东省的省会设于广州府，而广西省的省会则位于桂林府。桂林府之所以成为省会，得益于其发达的水路运输网络，这使其成为重要的货物转运中心。
在17世纪中期，清朝成功平定了各地的农民起义军和南明势力，基本确立了全国各地的统治。在清朝统治时期，我国形成了内陆18个省的区划格局，各省的基本框架也得以确立。
到了清朝嘉庆皇帝时期，广东省的区划格局为10个府和3个直隶州，具体包括广州府、肇庆府、南雄府、韶州府、惠州府、潮州府、高州府、雷州府、廉州府、琼州府、罗定州、连州、嘉应州。
而广西省下辖11个府、2个直隶州和2个直隶厅，分别是桂林府、平乐府、梧州府、浔州府、柳州府、庆远府、南宁府、思恩府、太平府、镇安府、泗城府、上思厅、百色厅、郁林州、归顺州。
怀集县地处丘陵、山地之间，古时交通不便，其行政归属问题曾长期困扰。清朝时期，广西省的平乐府和梧州府因怀集县归属问题，历经三次调整。起初，怀集县属于梧州府；中期时，划归平乐府；末期又重新划归梧州府。
清朝晚期，西方列强发动了一系列战争，如鸦片战争、中法战争等，导致清朝屡败。
西方列强开始染指中国西北、西南、东北等地。法国控制中南半岛后，势力进一步扩张至云南、广西。1912年，清朝灭亡，我国进入军阀混战时期。两广军阀相互攻伐，严重破坏了两广地区的经济。
一转眼，我国进入建国初期，两广地区陆续解放，展开了战后重建、恢复生产和发展的关键时期。在此背景下，广东省和广西省相继成立了专区。
最初，怀集县属于平乐专区管辖，该专区下辖11个县，包括贺县、信都县、富川县、钟山县、昭平县、蒙山县、平乐县、荔浦县、修仁县、恭城县以及怀集县。
但从地形条件来看，平乐专区对怀集县的管理存在较大难度。与此同时，怀集县通往广东省其他县的交通相对便捷。考虑到实际管理需求，1951年5月，怀集县被划归广东省西江专区代管。
到了1952年3月，怀集县正式划归广东省西江专区管理。随着广东省区划的不断调整，怀集县先后隶属于西江专区、粤中行政区、高要专区、江门专区、肇庆专区、肇庆地区等多个行政区划。
1988年，肇庆地区撤销，肇庆市成立，而怀集县依然归属肇庆地级市管辖。关于怀集县的归属，有“七百余载属广西，八百多年隶广东”的说法。1958年3月，广西省更名为广西僮族自治区，1965年10月又更名为广西壮族自治区。
