吕山杨吴行政区划上隶属于长兴县，长兴县隶属于湖州市，吕山杨吴的下属街道自然村居委会及其地理管辖范围内的企业事业单位也属于湖州市。