段落）
- 附件: （attachment/0/x/x/ID.ext）
- 日期范围 2026-08-07 ~ 2024-05-21，全量在 CUTOFF 窗口内（无截断）
用法:
python3 crawl_maoming_pqgs.py --pages=5 # 首批前5页
python3 crawl_maoming_pqgs.py --pages=200 # 全量
python3 crawl_maoming_pqgs.py --pages=1 # 测试
N)urljoin)push_to_searchdbu% 茂名市自然资源局-批前公示zhttp://zrzyj.maoming.gov.cnz/xwdt/pqgs/index.htmlz
2023-08-10u 自然资源zkMozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/120.0 Safari/537.36z?text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8)z
User-AgentRefererAcceptc t j | xs d } t j dd| } | j dd j dd } | j S )N u ^(?:·| |\s|•|·)+u u )htmlunescaperesubreplacestrip)ts '/root/gov_crawler/crawl_maoming_pqgs.py clean_titler + sP
ag2 A
12q9A (B ''"5A 779 c L | dk( rt }n t d| d}t j |t dd }|j
dk7 rg S |j xs d|_ |j }g }t j d |t j D ]R }|j d |j d
}}t | }|s3t || }|j ||d T t! } g }
|D ]/ } | d | vs | j# | d |
j | 1 |
S )
u 返回列表 items z/xwdt/pqgs/index_z.html Fheaderstimeoutverify utf-8z5