feapder v1.4.5

更新

1. 支持企业微信报警
2. 支持响应校验

    def validate(self, request, response):
        """
        @summary: 校验函数, 可用于校验response是否正确
        若函数内抛出异常，则重试请求
        若返回True 或 None，则进入解析函数
        若返回False，则抛弃当前请求
        可通过request.callback_name 区分不同的回调函数，编写不同的校验逻辑
        ---------
        @param request:
        @param response:
        ---------
        @result: True / None / False
        """

        pass

feapder v1.4.4

更新

1. 支持指定浏览器渲染时长

feapder v1.4.3

更新

1. 批次爬虫获取task值的方式支持以下几种

# 列表方式
id, url = task
id = task[0]
url = task[1]
# 字典方式
id, url = task.id, task.url
id, url = task.get("id"), task.get("url")
id, url = task["id"], task["url"]

feapder v1.4.2

Bug Fixes

1 . 修复代理池问题

feapder v1.4.1

更新

1. response支持BeautifulSoup

feapder 1.4.1-beta1

新增

1. AirSpider 支持item自动入库

feapder v1.3.8-beta1

Bug Fixes

1. 修复feapder使用阿里云redis集群，lua报错问题

feapder v1.4.0

更新

1. 将不常用的库拆出来，安装分为通过版，完整版

feapder v1.3.9

Bug Fixes

1. 修复邮箱报警导入包的bug

feapder v1.3.8

新增

1. 支持邮件报警，钉钉报警，可设置报警等级