核心能力
- Codex 多模式爬虫：批量 ASIN 并发抓取、关键词搜索拓品、店铺整店竞品扒取
- 全字段详情采集：标题、五点、长描述、类目节点、产品属性、变体 SKU、高清主图 / 辅图、视频、定价、埋词、评论数据
- AI 合规重构：规避侵权，自动改写文案、多语种翻译、核心关键词提取
- 素材自动化处理：图片去水印、尺寸裁剪、背景标准化、违规图过滤
- SP-API 官方合规刊登：新品创建、变体绑定、库存定价批量提交
- 无人值守调度：定时采集、失败自动重试、限流管控、上架结果日志入库
二、系统整体架构分层
1. 数据源接入层（Codex 爬虫核心）
- 导入方式：Excel 批量 ASIN、竞品店铺链接、关键词列表、第三方货源接口推送
- Codex 爬虫策略
- 静态页面解析：提取前台公开结构化商品元数据
- 动态渲染异步接口抓包：获取变体、图片、隐藏属性、后台埋词
- 反爬防护：动态 UA 池、IP 代理轮换、请求间隔节流、指纹随机化
- 输出：标准化 JSON 竞品原始数据包，存入业务数据库
2. 数据清洗与 AI 加工层
- 数据校验：缺失字段标记、无效 ASIN 过滤、重复商品去重
- Codex 内置大模型处理：
- 标题差异化重写，规避平台重复检测
- 五点描述、长文案原创改写
- 自动提取类目关键词、搜索埋词、前台检索词
- 多站点翻译（美 / 欧 / 日 / 澳等多语言 Listing 适配）
- 多媒体素材处理模块
- 批量下载竞品原图、视频资源
- 自动裁剪至亚马逊图片标准尺寸、去除水印 Logo
- 画质压缩，适配平台上传限制，违规画面拦截
3. 亚马逊 SP-API 对接刊登层
- 卖家资质鉴权：开发者账号、LWA 授权、MWS/SP-API 密钥统一管理
- 类目智能匹配：Codex 根据竞品类目路径自动匹配对应站点合规类目节点
- Listing 组装：填充改写后文案、属性、SKU 变体、定价模板、库存规则
- 分接口自动提交：商品基础信息创建、图片上传、库存更新、价格同步
- 上架回执接收：捕获平台返回成功 / 报错码，区分类目错误、图片违规、侵权预警、权限不足等问题
4. 调度监控与运维层（无人值守核心）
- 定时任务：定时批量采集竞品、定时批量刊登新品
- 分级重试机制：网络波动轻度错误即时重试；平台限流延迟重试；严重错误标记人工复核
- 全链路日志：采集日志、AI 改写日志、API 调用日志、上架结果日志
- 告警推送：上架失败、大量违规拦截、爬虫 IP 失效、API 额度耗尽实时通知
三、完整自动化业务流程
- 批量导入竞品 ASIN / 店铺链接至系统任务队列
- Codex 爬虫分布式并发抓取全商品详情、图文、变体、属性数据
- 原始数据入库，自动触发 AI 清洗改写流水线
- 图片 / 视频素材批量下载、合规化处理
- 系统根据预设运营模板（定价倍率、库存、发货模板）自动填充刊登参数
- 调用亚马逊 SP-API 接口，分步骤自动创建 Listing、上传素材、绑定 SKU 变体
- 接收亚马逊平台响应，标记上架成功 / 失败商品
- 失败商品自动进入重试队列，连续失败则生成异常报表推送运营
- 全流程数据留存，支持导出竞品原始数据、上架 Listing 档案、违规汇总表
四、Codex 爬虫核心抓取字段清单
- 基础信息：ASIN、产品名称、品牌、产品型号、前台类目完整路径
- 文案素材：五点描述、长描述、搜索关键词、包装清单、适用场景
- 属性参数：尺寸、材质、颜色、功率、规格等平台标准化属性
- 变体数据：多颜色 / 尺寸 SKU、各子 ASIN、变体图片、变体定价
- 多媒体：主图、辅图、A + 页面图片、产品短视频
- 市场数据：前台售价、促销价、星级评分、评论数量、核心差评关键词
五、合规风控设计（亚马逊运营核心红线）
- 爬虫合规：仅抓取亚马逊公开前台展示数据，不侵入卖家后台私有接口，控制请求频率避免 IP 封禁
- 版权风控：Codex AI 强制文案改写，禁止直接复制竞品原文；图片自动去除品牌水印，杜绝原图直传侵权
- 刊登风控：系统拦截侵权品牌词、禁售类目、平台限制词；自动校验类目准入资质
- 限流风控：SP-API 调用速率管控，按亚马逊官方配额分配请求，避免接口超限封号
六、系统落地价值
- 降人力：竞品调研、Listing 撰写、图片处理、商品刊登全流程无人操作，单账号铺货效率提升 10 倍以上
- 标准化输出：统一 Listing 规范、定价规则、素材标准，降低运营人为失误
- 快速拓品：批量抓取竞品数据快速上新，快速抢占细分品类流量
- 可追溯管理：所有采集、上架操作留存日志，违规、下架商品统一汇总复盘