冰窖厂胡同行政区划上隶属于崇文区，崇文区隶属于北京市，冰窖厂胡同的下属街道自然村居委会及其地理管辖范围内的企业事业单位也属于北京市。