在Scrapy中创建Request对象必须指定URL，否则报错退出；可通过scrapy.Request类手动构造或重写start_requests方法批量生成；支持传入headers设置User-Agent、meta携带自定义数据。
在Scrapy中创建Request对象是发起网络请求的第一步，必须指定目标URL，否则爬虫启动后会直接报错退出。
使用scrapy.Request类手动构造
第一步：导入Request类 → 在爬虫文件顶部添加 from scrapy import Request。
第二步：在parse方法或其他回调函数中，用 Request(url="https://example.com") 实例化对象。注意：url参数必须是字符串，不能是None或空字符串，否则抛出TypeError。
第三步：返回该Request对象或将其加入到返回的可迭代对象中，例如：yield Request(url="https://example.com", callback=self.parse_detail)。不返回或不yield会导致请求根本不会发出。
通过start_requests方法批量生成初始请求
在Spider类中重写 start_requests 方法，替代默认的 start_urls 行为。
方法一：遍历URL列表，逐个生成Request并yield：
def start_requests(self):
urls = ["https://a.com", "https://b.com"]
for url in urls:
yield Request(url=url, dont_filter=True)
方法二：用列表推导式一次性构造（简洁但调试困难）：
def start_requests(self):
return [Request(url=u, callback=self.parse) for u in self.start_urls]
【dont_filter=True时需谨慎】 该参数跳过去重逻辑，若多个请求URL完全相同，可能触发重复抓取甚至被反爬机制拦截。
带参数和Headers的Request创建
在Request初始化时传入meta字典可携带自定义数据，后续回调函数能通过response.meta读取。
设置User-Agent必须通过headers参数传入字典，不能写在meta里：
Request(
url="https://httpbin.org/user-agent",
headers={"User-Agent": "Mozilla/5.0 (X11; Linux x86_64)"},
meta={"source": "list_page", "page_num": 3}
)
headers中键名大小写不敏感，但值必须是字符串；若传入bytes或None，Scrapy会在请求发出前静默转换或报错。
