南大街税房上巷行政区划上隶属于榆阳区，榆阳区隶属于榆林市，南大街税房上巷的下属街道自然村居委会及其地理管辖范围内的企业事业单位也属于榆林市。