在统信uos系统上搭建scrapy需先确认python 3.9+及pip3可用，创建pip软链接确保命令指向python3；再安装build-essential、libxml2-dev等底层依赖；最后用pip install scrapy安装并验证scrapy version，通过scrapy startproject等命令完成项目创建与测试。
在统信UOS系统上搭建Scrapy爬虫框架，需绕过Windows常见依赖陷阱，直接适配Debian系底层，避免手动编译Twisted或安装pywin32等无效组件。
确认Python与pip环境
打开终端，执行 python3 --version 确保已预装Python 3.9或更高版本；UOS默认自带python3和pip3，但部分精简版可能未启用pip源。
运行 python3 -m pip list | grep pip 检查pip是否可用。若提示“no module named pip”，则先执行 sudo apt update && sudo apt install python3-pip 安装pip模块。
【必须确保pip指向python3】 执行 ls -l /usr/bin/pip*，若显示 pip → pip3 即正常；若无此软链接，需手动创建：sudo ln -sf /usr/bin/pip3 /usr/bin/pip，否则后续所有pip命令将失败。
安装核心依赖库
Scrapy在UOS上依赖lxml、zlib、openssl-dev等系统级库，仅靠pip无法自动补全。
执行以下命令一次性安装全部底层依赖：sudo apt install build-essential libssl-dev libffi-dev libxml2-dev libxslt1-dev zlib1g-dev python3-dev
这一步不可跳过。缺少libxml2-dev会导致lxml编译失败，进而使Scrapy安装中断并报错“Failed building wheel for lxml”。
接着升级pip和setuptools：python3 -m pip install --upgrade pip setuptools wheel
构建并发布在 Quartz 平台上的韩语网络小说连载（草稿→封面→webp→章节 md→lint→发布），使用 Nano Banana Pro + ffmpeg。
安装Scrapy及其配套组件
方法一：直接安装（推荐）
执行 python3 -m pip install scrapy。UOS基于Debian 11/12，当前pip源中scrapy 2.11+已内置适配Linux的Twisted二进制轮子，无需额外下载.whl文件。
方法二：若网络受限或超时，换国内源安装：python3 -m pip install -i https://pypi.tuna.tsinghua.edu.cn/simple/ scrapy
安装完成后验证：scrapy version 应输出类似 Scrapy 2.11.2 的结果。若提示“command not found”，说明scrapy未加入PATH——此时执行 python3 -m scrapy version 可绕过路径问题，证明安装成功。
创建并运行首个Scrapy项目
第一步：新建项目目录
执行 mkdir -p ~/scrapy-projects && cd ~/scrapy-projects
第二步：初始化项目scrapy startproject demo_spider 会在当前目录生成 demo_spider/ 文件夹。
第三步：进入项目并生成爬虫cd demo_spider && scrapy genspider testspider example.com
第四步：立即测试爬取能力scrapy crawl testspider -o result.json。几秒后生成 result.json，说明框架已可正常发起HTTP请求、解析响应并导出数据。
