需遵循服务商制定的《API 服务条款》，包含调用频率、数据用途限制

提供完整技术文档（参数说明、返回格式、错误码）

支持版本迭代，接口变更前通常会提前通知开发者

开发框架：Python（Scrapy、BeautifulSoup）、Java（WebMagic）

反爬应对：IP 代理池、User-Agent 轮换、验证码识别（如 Tesseract）

动态渲染处理：Selenium、Playwright（模拟浏览器执行 JS）

企业级数据集成：如电商平台订单同步（淘宝开放平台 API）、支付数据对接（微信支付 API），需确保数据合法性与稳定性，避免业务中断。

高频率数据查询：如天气数据（高德地图 API）、股票行情（同花顺 API），需按秒 / 分钟级调用，依赖 API 的限流机制保障服务可用性。

结构化数据需求：如用户信息同步（企业内部系统 API）、商品详情获取（京东开放平台 API），直接使用 JSON 格式数据可减少解析成本。

无官方 API 的公开数据：如政府公开信息（统计局网页数据）、行业报告（非付费公开页面），服务商未提供接口但数据合法公开。

临时数据采集需求：如个人研究、小范围市场调研（如抓取某品类商品价格对比），无需长期维护，开发周期短于等待 API 申请。

API 功能 / 配额不足的补充：在获得服务商书面授权后，可通过爬虫补充 API 未覆盖的数据（如 API 仅返回 100 条数据，授权后抓取完整数据集）。

禁止突破网站反爬措施：如破解验证码、篡改 Cookie、使用恶意 IP 代理，可能构成《刑法》中的 “非法获取计算机信息系统数据罪”。

禁止抓取敏感数据：如用户隐私（手机号、身份证号）、商业秘密（未公开的营收数据），违反《个人信息保护法》《反不正当竞争法》。

遵守 robots 协议：网站根目录的robots.txt文件明确禁止抓取的内容（如Disallow: /api/），爬虫需主动规避。

禁止超范围使用：如将仅用于内部系统的 API 数据对外售卖，违反《API 服务条款》可能导致账号封禁、法律追责。

合理处理接口故障：需设计降级方案（如 API 限流时缓存历史数据），避免因 API 故障导致自身业务崩溃，同时及时响应服务商的接口更新通知。