Convert a Cookie instance to a dict in HAR cookie format.

计算差值

计算差值

创建爬虫所需的表, 分成以下两种: 1. result table: 用户必须自定义. 保存抓取到的item结果, 一般包含title, content, url, filepath 等 2. history table: 自动创建,无需定义. 保存抓取历史, 用于去

日期增加或减少n天

删除data中符合规则pattern的元素；参数count同sub

Return a hash for a dict, based on its contents

Returns a filename that is safer to use on the filesystem. The filename will not contain a slash (nor the path separator for the c

重组数据

过滤数据

Guess the most appropriate Response class based on the given arguments.

获取缺口位置 :param image1:完整图片 :param image2: 带缺口的图片 :return:

Return scrapy.http.Headers instance from headers data. 3 data formats are supported: * {name: value, ...} dict; * [(name, value

Convert CookieJar to HAR cookies format

Return a hash for any JSON-serializable value. >>> json_based_hash({"foo": "bar", "baz": [1, 2]}) '0570066939bea46c610bfdc35b20f37ef

把data转换为日期时间，时区为东八区北京时间，能够识别：今天、昨天、5分钟前等等，如果不能成功识别，则返回datetime.datetime.now()

Parse X-Splash-Saved-Arguments header value. >>> value = u"name1=9a6747fc6259aa374ab4e1bb03074b6ec672cf99;name2=ba001160ef96fe2a3f938fea9

判断两张图片的像素是否相等,不想等即为缺口位置 :param image1: :param image2: :param x: x坐标 :param y: y 坐标 :return:

Convert scrapy.http.Headers instance to a dictionary suitable for JSON encoding.

title: 报警标题

接受要在mysql中查重的item,生成一个sha值,供日后查重用

将传入文本转换为str类型 兼容py2 py3

Return str representation of `text` (bytes in Python 2.x and unicode in Python 3.x).