榆树巷行政区划上隶属于北京市宣武区，榆树巷的下属街道自然村居委会及其地理管辖范围内的企业事业单位也属于北京市宣武区。