武邑镇陈小王村行政区划上隶属于武邑县，武邑县隶属于衡水市，武邑镇陈小王村的下属街道自然村居委会及其地理管辖范围内的企业事业单位也属于衡水市。