爬虫
未读
playwright
Playwright 介绍 Playwright 是一个用于自动化浏览器操作的开源工具,由 Microsoft 开发和维护。它支持多种浏览器(包括 Chromium、Firefox 和 WebKit)和多种编程语言(如 Python、JavaScript 和 C#),可以用于测试、爬虫、自动化任务等
Django
未读
Django-Celery-Flower实现异步和定时爬虫及其监控邮件告警
1 Django中集成方式一(通用方案) 1.1 把上面的包-复制到djagno项目中 1.2 在views中编写视图函数 1.3 配置路由 1.4 浏览器访问,提交任务 1.5 启动worker执行任务 1.6 查看任务结果 2 Django中集成方式二(官方方案) 2.0 安装模块 pip in
后端
未读
分布式异步任务框架-celery
1 Celery介绍 1.1 Celery 是什么? # 1 celery 是一个灵活且可靠的,处理大量消息的分布式系统,可以在多个节点之间处理某个任务
# 2 celery 是一个专注于实时处理的任务队列,支持任务调度
# 3 celery 是开源的,有很多的使用者
# 4 celery 完