92 Commits

Author SHA1 Message Date
2004aa0900 fix: 使用 logger.exception 替换 logger.info 以记录异常信息 2025-05-28 17:26:54 +08:00
5169c9250b fix: 修正日志记录格式以正确显示 resinfo 的长度 2025-05-28 17:02:01 +08:00
b4db51a8e7 feat: 引入自定义日志记录器并替换 print 语句为 logger 记录 2025-05-28 15:02:57 +08:00
68d79c84b0 refactor: 移除未使用的导入以清理代码 2025-05-28 14:34:02 +08:00
cdc1bede9e feat: 添加 fetch_proxies1 方法以从新 API 获取代理 IP 2025-05-28 14:30:06 +08:00
d26828449b feat: 更新 get_videoInfo 方法以支持代理和自定义头部 2025-05-23 00:09:42 +08:00
da374a7ed0 feat: 过滤更新参数,只保留 video 表中存在的列 2025-05-23 00:07:33 +08:00
c46f4d9b83 feat: 更新 flask_app.py 以使用异步方法更新视频统计信息 2025-05-23 00:03:04 +08:00
9d1e2033c7 feat: 添加 update_video_stats_async 方法以支持异步更新视频统计信息 2025-05-23 00:02:09 +08:00
95fed6b6c8 feat: 添加 update_video_stats 方法以更新视频统计信息 2025-05-22 23:56:38 +08:00
f17ff34563 feat: 更新 flask_app.py 以使用代理代码获取视频信息,并添加项目配置文件 2025-05-22 23:38:10 +08:00
402307d36a feat: 增加调试信息,输出获取 token 和视频信息的参数及结果 2025-05-22 23:32:25 +08:00
6804164034 fix: 修正导入语句,将 random 模块的导入方式更改为从 random 导入 2025-05-22 23:22:08 +08:00
aa8b38b075 fix: 修正导入语句,将 random 模块的导入方式更改为从 random 导入 2025-05-22 23:21:02 +08:00
66ee7bf924 fix: 修正文件名拼写错误,将 flasl_app.py 更名为 flask_app.py 2025-05-22 23:15:45 +08:00
42b7b8ad79 feat: 优化 DB.py 和 dump_keyword_title.py,增强数据处理和日志记录功能 2025-05-22 23:11:24 +08:00
217d8c7ed7 feat: 优化 DB.py 和 dump_keyword_title.py,增强数据处理和日志记录功能 2025-05-22 21:46:11 +08:00
9b74bdf312 feat: 添加对响应为 None 的处理以增强 main.py 的健壮性 2025-05-22 11:46:26 +08:00
2d75510c59 feat: 添加 _buf_payload 缓冲区以增强 DB.py 的数据处理能力 2025-05-21 08:37:18 +08:00
b25e3cf5f5 feat: 修改 dump_keyword_title.py 中的级别判断,将 level 2 更改为 level 9 2025-05-21 02:03:22 +08:00
e2eb8ab13e feat: 添加 _buf_payload 缓冲区以增强 DB.py 的数据处理能力 2025-05-21 01:43:37 +08:00
06503422ee feat: 优化 DB.py 代码,简化表定义并增强 upsert_video 方法的调试信息 2025-05-21 01:41:32 +08:00
9a30c2f86d feat: 移除未使用的 turtledemo.penrose 导入,优化代码整洁性 2025-05-21 01:20:17 +08:00
4c6725ddde feat: 移除未使用的 turtledemo.penrose 导入,优化代码整洁性 2025-05-21 01:19:15 +08:00
ab1a2408f6 feat: 移除未使用的 turtledemo.penrose 导入,优化代码整洁性 2025-05-21 01:13:49 +08:00
93bbc4770d feat: 移除未使用的 turtledemo.penrose 导入,优化代码整洁性 2025-05-21 01:05:59 +08:00
ed73a94a4f feat: 增强 upsert_video 方法,添加缓冲区长度和操作时间的调试信息 2025-05-21 01:04:52 +08:00
1c4823d633 feat: 优化视频数据处理逻辑,调整缓冲区大小和刷新策略,增强并发支持 2025-05-21 00:55:41 +08:00
bcc4751328 feat: 添加视频操作和视频表结构,支持批量插入和更新功能 2025-05-21 00:41:44 +08:00
c33bffa392 feat: 增强调试信息,upsert_video 和 get_searchInfo 函数中添加制表符以改善可读性 2025-05-21 00:08:44 +08:00
aa68179183 feat: 增强调试信息,upsert_video 和 get_searchInfo 函数中添加 level 参数 2025-05-21 00:06:39 +08:00
2484cc8b3d feat: 修改 get_searchInfo 函数,增强调试信息以包含代理名称 2025-05-21 00:02:02 +08:00
6c78edeacd feat: 添加调试信息以增强 get_searchInfo 函数的可追踪性 2025-05-21 00:00:01 +08:00
b1e54312ca feat: 添加调试信息以增强数据处理的可追踪性 2025-05-20 23:54:24 +08:00
82f134fe2f feat: 修改 get_searchInfo 函数,添加代理参数以支持代理请求 2025-05-20 23:41:26 +08:00
91a1113d51 feat: 修改 get_searchInfo 函数,添加代理参数以支持代理请求 2025-05-20 23:21:24 +08:00
f9e88e98c9 feat: 重构数据集成逻辑,支持并行处理和异常回滚机制 2025-05-20 23:16:32 +08:00
456be9f8c5 feat: 优化代理和头部管理,增强请求重试机制 2025-05-20 22:59:39 +08:00
4f3051b100 feat: 重构 dump_keyword_title.py,优化数据库查询和数据推送逻辑 2025-05-20 22:07:09 +08:00
49c2e1d43c feat: 添加 l0、l1 和 l2 队列的推送方法,优化数据处理流程 2025-05-20 21:43:00 +08:00
0903a00ed2 fix: 优化数据库连接关闭逻辑,确保资源正确释放并处理 Redis 关闭异常 2025-05-20 21:39:35 +08:00
5ba453fad7 feat: 添加 fetch_keyword_title 方法以支持关键词标题的数据库查询 2025-05-20 21:35:17 +08:00
b54f30c200 feat: 添加视频队列键名和回滚逻辑,优化视频处理流程 2025-05-20 21:29:11 +08:00
b5f611f21c refactor: 更新视频队列键名以提高代码可读性,并添加项目配置文件 2025-05-20 21:15:41 +08:00
62184e8ad8 fix: 优化视频数据插入逻辑,使用 ON DUPLICATE KEY 更新现有记录以提高性能 2025-05-20 21:12:15 +08:00
16c71d5b5b feat: 添加项目配置文件和更新代理设置以支持新功能 2025-05-19 22:18:55 +08:00
a3a8834df0 feat: 添加视频数据字段并更新数据库查询以支持新数据 2025-05-19 21:54:45 +08:00
01c3576d6d fix: 优化视频任务处理逻辑,移除冗余代码并确保仅添加有效视频数据 2025-05-19 21:45:48 +08:00
64f8ed96a1 fix: 添加 MySQL 重试机制以处理 InterfaceError 并确保连接稳定 2025-05-19 20:59:56 +08:00
90ad9c28ff fix: 添加更新 is_repeat 字段的功能并修改数据获取函数以支持批次参数 2025-05-18 23:54:14 +08:00