66 Commits

Author SHA1 Message Date
0d35030f6d fix: 修改 traffic_segment 的生成范围以确保更合理的值并更新 fetch_proxies3 的返回格式 2025-05-18 22:59:51 +08:00
39d4bc111a fix: 修改 traffic_segment 的生成范围以确保更合理的值并更新 fetch_proxies3 的返回格式 2025-05-18 22:00:26 +08:00
94c15b8611 fix: 在适当位置重新调用 gettoken 方法以确保令牌有效性 2025-05-18 21:12:16 +08:00
9768acca11 fix: 在适当位置重新调用 gettoken 方法以确保令牌有效性 2025-05-18 20:58:19 +08:00
af3945dbec feat: 添加 fetch_proxies3 方法以增强代理获取功能并更新相关调用 2025-05-18 20:49:37 +08:00
fad30a1c21 fix: 修改视频列表获取逻辑,支持级别 0 的请求以增加最大页数和限制 2025-05-18 14:03:30 +08:00
1b46a94e7e fix: 修改获取搜索信息的逻辑,支持根据请求级别传递参数 2025-05-18 13:36:15 +08:00
ac87dfa9c3 fix: 移除未使用的导入以清理代码 2025-05-18 13:32:06 +08:00
e587efcfd4 fix: 修改视频列表获取逻辑,支持级别 2 的请求以增加最大页数和限制 2025-05-18 12:31:57 +08:00
84c6f3afd9 fix: 修改搜索信息获取逻辑,增加参数以支持不同级别的请求和视频时长过滤 2025-05-17 20:06:15 +08:00
69137dd128 fix: 更新代理 API URL 和请求参数以适应新的接口和流量段生成 2025-05-17 16:51:45 +08:00
8e0c99284b fix: 修改代理获取逻辑以使用新的 fetch_proxies2 函数并优化打印信息 2025-05-17 14:35:59 +08:00
8239dde04c fix: 修改代理获取方法以使用区域代码并更新全局代理字典 2025-05-17 12:43:46 +08:00
75cf8f7345 feat: 添加委托代理检索方法并重构代理处理 2025-05-17 11:13:55 +08:00
dd90cc3c91 feat: 更新视频插入逻辑以包括is_repeat字段并改进代理池为空时的阻塞处理 2025-05-17 00:33:55 +08:00
14023c3b48 feat: 初始化 DailyMotion 分布式爬虫项目 2025-05-16 22:16:26 +08:00