建设大街行政区划上隶属于江西省上饶市万年县，建设大街的下属街道自然村居委会及其地理管辖范围内的企业事业单位也属于江西省上饶市万年县。