文章
Python 工具库打包实战:从项目结构到 whl 包发布
在团队协作或数据工程中,我们经常需要复用一些通用工具,例如重试机制、日志管理、文件扫描等。将这些功能封装成一个 Python 包,通过 pip install 安装,是最优雅的复用方式。本文将以 bigdata_utils 为例,手把手教你创建、打包并安装自己的 Pyt...
tenacity 重试监控实战
监控记录重试过程:
tools.py
tenacity 重试库入门
Demo 1: 基础入门
drssionpage实战qwen自动化
本实战主要是在qwen官网实现提交问并获取回到结果保存到本地
项目结构:
config.py
drssionpage 保存网页为pdf和png格式
pdf格式:
ltx2.3 皮克斯风格拟人橘猫剧情提示词扩写
该提示词主角是一个皮克斯动画风格拟人化橘猫,只需要输出场景、剧情、大体台词、时长就可以生成完整提示词
ThreadPoolExecutor + 后台轮询线程协作指南
在实际项目中,我们常常需要同时处理两类并发任务:一类是 CPU/IO 密集型的并行执行任务(如批量文档处理),另一类是需要在后台持续轮询、监控主任务进度的守护任务(如检测任务队列状态、上报进度等)。这两类任务如何协作,往往比单独使用线程池或单独使用后台线程更复杂。
...
数据治理pipeline-demo
文件结构
core/base_operator.py