关王庙巷行政区划上隶属于余干县，余干县隶属于上饶市，关王庙巷的下属街道自然村居委会及其地理管辖范围内的企业事业单位也属于上饶市。