十万山瑶族乡前身是钦州地区大坡畜牧场，1980年4月经自治区人民政府批准，成立广西国营十万山华侨林场，将原防城各族自治县大菉公社的太平、垌平、坡稔、那德4个大队52个生产队划归林场管理，分别于1978年、1980年、1981年共安置越南归难侨1980人。林场原属自治区华侨企业管理局领导管理的正处级单位，2004年8月31日下放防城港市防城区领导管理，是归侨全民所有制、农村集体所有制两种体制并存的华侨林场，是防城港市唯一的华侨农林场。2006年起开始着手筹备撤场建乡工作，2013年1月18日，自治区人民政府批复同意调整大菉镇行政区划设立十万山瑶族乡。