判断当前Page的URL是否和输入正则匹配 @param urlRegex @return

判断当前Page的URL是否和输入正则规则匹配 @param urlRegexRule @return

设置是否自动抽取符合正则的链接并加入后续任务 @param autoParse 是否自动抽取符合正则的链接并加入后续任务

设置每个爬取任务的最大执行次数，爬取或解析失败都会导致执行失败。 当一个任务执行失败时，爬虫会在后面的迭代中重新执行该任务， 当该任务执行失败的次数超过最大执行次数时，任务生成器会忽略该任务 @param maxExecuteCount 每个爬取任务的最大执行次数

设置正则规则 @param regexRule 正则规则

设置是否断点爬取 @param resumable 是否断点爬取

停止爬虫

@param page 当前访问页面的信息 @param next 可以手工将希望后续采集的任务加到next中（会参与自动去重）