Function getPageE

Autopage.user.js:1686–1753

(url)

    // 翻页类型 1/3
    function getPageE(url) {
        // Chrome 浏览器可以依靠改用原生 XMLHttpRequest 尝试解决因缺失跨域 cookie 导致的问题（比如一些使用 Cloudflare CDN 人机验证的网站，会出现脚本后台获取到人机验证页面）
        // Firefox 浏览器则需要使用 GM_xmlhttpRequest 的 cookiePartition 参数来解决（该参数要 Tampermonkey v5.2 及以上才有）
        // 如果翻页规则有 curSite.gmxhr 或是 Firefox 浏览器，则依然使用 GM_xmlhttpRequest+cookiePartition，反之则使用原生 XMLHttpRequest
        if (curSite.gmxhr || navigator.userAgent.includes('Firefox')) {
            GM_xmlhttpRequest({
                url: url,
                method: 'GET',
                //overrideMimeType: 'text/html; charset=' + (document.characterSet||document.charset||document.inputEncoding),
                responseType: 'arraybuffer', // Firefox 浏览器下 Tampermonkey 访问 GBK 网站时会乱码，只能改为 TextDecoder 手动转换编码
                headers: {
                    'x-requested-with': (curSite.xRequestedWith === true) ? 'XMLHttpRequest':null,
                    'Referer': (curSite.noReferer === true) ? null:location.href,
                    'Accept': 'text/html,application/xhtml+xml,application/xml'
                },
                cookiePartition: { // https://github.com/Tampermonkey/tampermonkey/issues/2057
                    topLevelSite: location.origin
                },
                timeout: 5000,
                onload: function (response) {
                    try {
                        //console.log('URL：' + url, '最终 URL：' + response.finalUrl, '返回内容：' + response.responseText, response)
                        processElems(createDocumentByString((new TextDecoder((document.characterSet||document.charset||document.inputEncoding))).decode(response.response)));
                        //processElems(createDocumentByString(response.responseText));
                    } catch (e) {
                        console.error('[自动无缝翻页] - 处理获取到的下一页内容时出现问题，请检查！\n', e, '\nURL：' + url, '\n最终 URL：' + response.finalUrl, '\n返回状态：' + response.statusText, '\n返回内容：' + response.responseText);
                    }
                },
                onerror: function (response) {
                    console.log('URL：' + url, response)
                    GM_notification({text: '❌ 获取下一页失败...', timeout: 5000});
                },
                ontimeout: function (response) {
                    setTimeout(function(){curSite.pageUrl = '';}, 3000)
                    console.log('URL：' + url, response)
                    GM_notification({text: '❌ 获取下一页超时，可 3 秒后再次滚动网页重试（或尝试刷新网页）...', timeout: 5000});
                }
            });
        } else {
            const xhr = new XMLHttpRequest();
            xhr.open('GET', url, true);
            xhr.overrideMimeType('text/html; charset=' + (document.characterSet||document.charset||document.inputEncoding));

            if (curSite.xRequestedWith === true) {xhr.setRequestHeader('x-requested-with', 'XMLHttpRequest')}
            //(curSite.noReferer === true) ? xhr.setRequestHeader('Referer', ''):xhr.setRequestHeader('Referer', location.href)
            xhr.setRequestHeader('Accept', 'text/html,application/xhtml+xml,application/xml')

            xhr.timeout = 5000;
            xhr.onload = function() {
                try {
                    //console.log('URL：' + url, '最终 URL：' + xhr.responseURL, '返回内容：' + xhr.responseText)
                    processElems(createDocumentByString(xhr.responseText));
                } catch (e) {
                    console.error('[自动无缝翻页] - 处理获取到的下一页内容时出现问题，请检查！\n', e, '\nURL：' + url, '\n最终 URL：' + xhr.responseURL, '\n返回状态：' + xhr.statusText, '\n返回内容：' + xhr.responseText);
                }
            };
            xhr.onerror = function() {
                console.log('URL：' + url, xhr.statusText)