海关大楼行政区划上隶属于山东省烟台市芝罘区，海关大楼的下属街道自然村居委会及其地理管辖范围内的企业事业单位也属于山东省烟台市芝罘区。