TSPD
TSPD é uma proteção WAF (Web Application Firewall) projetada para prevenir ataques automatizados e atividades suspeitas no site. Para o usuário comum, seu funcionamento é quase imperceptível, já que o principal objetivo é bloquear scripts e bots. No navegador, as manifestações do TSPD são raras e geralmente só se tornam perceptíveis durante requisições incomuns ou em grande volume ao servidor.
-
Use seus próprios proxies para esta tarefa.
-
O proxy nas tarefas TSPD deve suportar uma sessão estática. O mesmo IP de saída deve ser usado em todas as etapas (obtenção de cookies → resolução da tarefa → uso dos cookies obtidos). A mudança de sessão ou de IP entre as etapas pode causar erros.
-
Após a resolução, você receberá cookies que devem ser enviados nas requisições subsequentes ao site de destino.
Parâmetros da solicitação
IMPORTANTE: alguns valores de parâmetros são dinâmicos — eles mudam a cada renderização da página que contém TSPD.
Extraia-os imediatamente antes de criar a tarefa para evitar erros durante a resolução.
Veja exemplos de extração automática de parâmetros nas seções Como obter cookies, Como obter o Base64 da página e Exemplos de resolução automática do TSPD.
type<string>requiredCustomTask
class<string>requiredtspd
websiteURL<string>requiredEndereço da página onde o TSPD está localizado.
tspdCookie (dentro de metadata)<string>requiredCookies obtidos na página com TSPD-challenge: "tspdCookie": "TS386a400d029=082670627aab2800722d179e73a60b575d00c96728a9f8dedd8be27a40f6a1aa5df467cebf7da7315a4e16675f010245; ....; ....;"
htmlPageBase64 (dentro de metadata)<string>requiredPágina completa com TSPD no formato base64, por exemplo: "htmlPageBase64": "PCFET0NUWVBFIGh0bWw+DQo8aHRtbD48aGVhZD4NCjxtZXRhIGh0dHAtZXF1aXY9IlByYWdtYSIgY29udGVudD0ibm8tY2FjaGUiLz4NCjxtZXRhIGh0dHAtZXF1aXY9IkV4cGlyZXMiIGNvbnRlbnQ9Ii0xIi8+DQo8bWV0YSBodHRwLWVxdWl2PSJDYWNoZUNvbnRyb2.....L2JvZHk+PC9odG1sPg=="
userAgent<string>optionalUse o valor atual compatível com o CapMonster Cloud: userAgentPlaceholder
Você pode obter o valor mais recente em: https://capmonster.cloud/api/useragent/actual.
proxyType<string>requiredhttp - proxy HTTP/HTTPS normal;
https - use se http não funcionar (necessário para alguns proxies personalizados);
socks4 - proxy SOCKS4;
socks5 - proxy SOCKS5.
proxyAddress<string>requiredEndereço IP do proxy (IPv4/IPv6). Não permitido:
- Proxies transparentes
- Proxies da máquina local
proxyPort<integer>requiredPorta do proxy.
proxyLogin<string>requiredLogin do proxy.
Restrições: não deve conter os caracteres ;, |, )
proxyPassword<string>requiredSenha do proxy.
Método para criar tarefa
https://api.capmonster.cloud/createTask
Exemplo de requisição
{
"type": "CustomTask",
"class": "tspd",
"websiteUrl": "https://yourwebsite.com/page-with-tspd",
"metadata": {
"tspdCookie": "TS386a400d029=08...010245; TS386a400d029=08...01a06e; TS386a400d078=08...dbb3b0c; TSd2153684027=08...1944",
"htmlPageBase64": "PCFET0NU...k+PC9odG1sPg=="
},
"userAgent": "userAgentPlaceholder",
"proxyType": "your-proxy-type",
"proxyAddress": "your-proxy-address",
"proxyPort": 1234,
"proxyLogin": "your-proxy-login",
"proxyPassword": "your-proxy-password"
}
Exemplo de resposta
{
"errorId": 0,
"taskId": 407533072
}
Método para obter o resultado da tarefa
Use o método getTaskResult para obter a solução do TSPD.
Importante: após a conclusão bem-sucedida, nas versões mais recentes do TSPD pode ser retornado o cookie
TSPD_101_DID, enquanto nas versões mais antigas ele pode não estar presente.
https://api.capmonster.cloud/getTaskResult
Exemplo de requisição
{
"clientKey":"API_KEY",
"taskId": 407533072
}
Exemplo de resposta
{
"errorId":0,
"status":"ready",
"solution": {
"Domains": {
"example.com": {
"Cookies": {
"TS386a400d029": "08267...01a06e",
"TS386a400d078": "08267...bb3b0c",
"TSd2153684027": "08267...11944",
"TS00000000076": "08267...b70fc2",
"TSPD_101_DID": "08267...1d53f",
"TS386a400d075": "0402b...1000"
}
}
}
}
}
Trabalhando com uma página com TSPD
Exemplo de página HTML com TSPD-challenge
Ao enviar uma requisição GET para uma página com TSPD-challenge, você receberá um HTML que deve ser codificado em Base64 e enviado no parâmetro htmlPageBase64. Além disso, na primeira requisição o servidor retornará cookies especiais (por exemplo, TS386a...400d029) — eles devem ser enviados em tspdCookie, pois são obrigatórios para a resolução correta do TSPD e para obter a resposta da API.
Requisição GET para a página com TSPD-challenge
GET https://example.com/login?client_id=example.client.id&authorization_id=example_auth_id
sec-ch-ua: "Not:A-Brand";v="99", "Google Chrome";v="150", "Chromium";v="150"
sec-ch-ua-mobile: ?0
sec-ch-ua-platform: "Windows"
upgrade-insecure-requests: 1
user-agent: userAgentPlaceholder
accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.7
sec-fetch-site: none
sec-fetch-mode: navigate
sec-fetch-user: ?1
sec-fetch-dest: document
accept-encoding: gzip, deflate, br
accept-language: en-US
priority: u=0,i
Upgrade-Insecure-Requests: 1
Página com TSPD-challenge (exemplo)
<!DOCTYPE html>
<html>
<head>
<meta http-equiv="Pragma" content="no-cache"/>
<meta http-equiv="Expires" content="-1"/>
<meta http-equiv="CacheControl" content="no-cache"/>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8"/>
<link rel="icon" href="data:;base64,iVBOw0KGgo="/>
<!-- Script TSPD / ThreatMetrix Fingerprinting -->
<script type="text/javascript">
(function() {
// Indicador TSPD: a variável bobcmn contém dados criptografados de fingerprinting / sessão
window["bobcmn"] = "101110111110102000000042000000052000000062000000012386a400d200000096200000000200000002300000000300000000300000006/TSPD/300000008TSPD_10130000000cTSPD_101_DID300000005https3000000b0082670627aab200065e4de40b46b945b49688c1d7f2da4f189123687c7515bd58ed223d60435730b086f24771b0a2800da70f3141fd5255393c12c8c87a64a83b8168f256387790c28dd3abb533560e42a9a0970df08ebd7300000002TS200000000200000000";
// Indicador TSPD: failureConfig para determinar uma tentativa "incorreta" ou erro na página
window["failureConfig"] = "524f6f70732e2e2e2e736f6d657468696e672077656e742077726f6e672e2e2e2e20796f757220737570706f72742069642069733a2025444f534c372e6368616c6c656e67652e737570706f72745f6964252e1338353931363039373735373932323232353437062f545350442f171801";
window.AtT = !!window.AtT;
// JS principal do TSPD
try {
(function(){
var z = {
decrypt: function(z){
try {
return JSON.parse(
function(z){
z = z.split("l");
var s = "";
for (var _=0; _<z.length; ++_) s += String.fromCharCode(z[_]);
return s;
}(z)
);
} catch(_) {}
}
};
return z = { configuration: z.decrypt("123l34l97l99l116l105l118l101l34l58l34l110l111l34l44l34l100l101l98l117l103l103l105l110l34l58l34l110l111l34l44l34l109l111l100l117l108l11149l34l58l34l101l110l97l98l108l101l100l34l44l34l109l111l100l117l108l101l50l34l58l34l101l110l97l98l108l101l100l34l44l34l109l111l100l117l108l101l51l34l58l34l101l110l97l98l108l101l100l34l44l34l109l111l100l117l108l101l52l34l58l34l101l110l97l98l108l101l100l34l125")};
})();
var sz = 15;
// Verificação do ambiente do navegador, indicadores IE9/IE9RGB
zs(window[Zs[J(1086839, sz)]] === Zs);
zs(typeof ie9rgb4 !== J(1242178186184, sz));
})();
})();
</script>
<!-- Script de fingerprinting TSPD / ThreatMetrix, tipo 8 -->
<script type="text/javascript" src="/TSPD/082670627aab2000b8cb2cd11a623629ab3f79c29c36f891be5a445796e6258af0d27cef4a5db1d4?type=8"></script>
<script type="text/javascript">
// Outro indicador TSPD: blobfp e slobfp - impressões digitais únicas do dispositivo
(function(){
window["blobfp"] = "01010101b00400000100e803000000000d4200353665636365626565343132626436353030363938386138663833326530623934356538333435633861363438623036643666386238363263333064396466633465210068747470733a2f2f72652e73656375726974792e66356161732e636f6d2f72652f0700545350445f3734";
window["slobfp"] = "0827420c940b100087cabc9b010dfd3b94ac7988b1dcbba0";
})();
</script>
<!-- Script de fingerprinting TSPD / ThreatMetrix, tipo 12 -->
<script type="text/javascript" src="/TSPD/082670627aab2000b8cb2cd11a623629ab3f79c29c36f891be5a445796e6258af0d27cef4a5db1d4?type=12"></script>
<noscript>
Please enable JavaScript to view the page content.<br/>
Your support ID is: 8591609775792222547.
<link rel="stylesheet" href="/TSPD/?type=25" />
</noscript>
</head>
<body>
</body>
</html>
Exemplo de aceitação bem-sucedida de cookies (o TSPD não aparece em uma requisição repetida)
Ao fazer uma nova requisição à página de destino com os cookies do CapMonster Cloud, o servidor retornará um HTML normal com status 200 e sem sinais de TSPD. Isso significa que os cookies foram aceitos e você pode continuar trabalhando com o seu site.
Requisição GET para a página
GET https://example.com/login?client_id=example.client.id&authorization_id=example_auth_id
sec-ch-ua: "Not:A-Brand";v="99", "Google Chrome";v="150", "Chromium";v="150"
sec-ch-ua-mobile: ?0
sec-ch-ua-platform: "Windows"
upgrade-insecure-requests: 1
user-agent: userAgentPlaceholder
accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.7
sec-fetch-site: none
sec-fetch-mode: navigate
sec-fetch-user: ?1
sec-fetch-dest: document
accept-encoding: gzip, deflate, br
accept-language: en-US
# Use os cookies obtidos como resultado da resolução da tarefa via CapMonster Cloud
# Substitua os valores de exemplo abaixo pelos cookies reais da resposta da API
# Formato: cookie: nome1=valor1; nome2=valor2; ...
cookie: TS386a400d029=08267...01a06e; TS386a400d078=0826...dbb3b0c; TSd2153684027=082670...811944; TS00000000076=082670...b70fc2; TSPD_101_DID=08267...1d53f; TS386a400d075=0402b1...701000
priority: u=0,i
Upgrade-Insecure-Requests: 1
Página HTML (exemplo)
<!DOCTYPE html>
<html lang="demo">
<head>
<meta charset="utf-8" />
<link rel="icon" type="image/png" href="/sandbox.png" />
<meta name="viewport" content="width=device-width, initial-scale=1.0" />
<title>Sample Portal</title>
<!-- Demo Font -->
<link rel="stylesheet" href="https://demo-cdn.com/fonts/demo-font.css" />
<!-- Icons -->
<link rel="stylesheet" href="https://assets-sandbox.com/icons/demo-icons.css"/>
<link rel="stylesheet" href="/static/sandbox.css">
<script type="module" crossorigin src="/scripts/demo-app.js"></script>
<link rel="stylesheet" crossorigin href="/styles/sample-theme.css">
</head>
<body>
<noscript>Please enable scripts to continue.</noscript>
<div id="sandbox-root"></div>
</body>
</html>
Como obter cookies
O exemplo de código abaixo envia uma requisição GET para a página de autorização example.com/login com cabeçalhos de navegador, exibe o status da resposta, o HTML completo da página e os cookies recebidos (incluindo aqueles que começam com TS).
Exemplo em Node.js
const url =
"https://example.com/login?client_id=example.client&authorization_id=example123";
// === Cabeçalhos ===
const headers = {
"sec-ch-ua":
'"Not(A:Brand";v="8", "Chromium";v="150", "Google Chrome";v="150"',
"sec-ch-ua-mobile": "?0",
"sec-ch-ua-platform": '"Windows"',
"Upgrade-Insecure-Requests": "1",
"user-agent":
"userAgentPlaceholder",
accept:
"text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.7",
"sec-fetch-site": "same-site",
"sec-fetch-mode": "navigate",
"sec-fetch-user": "?1",
"sec-fetch-dest": "document",
"accept-language": "en-US",
priority: "u=0,i",
referer: "https://example.com/"
};
async function main() {
const response = await fetch(url, {
method: "GET",
headers,
redirect: "follow",
});
console.log("Status:", response.status);
console.log("Final URL:", response.url);
// === Obter HTML ===
const html = await response.text();
console.log("\n===== RESPOSTA HTML COMPLETA =====\n");
console.log(html);
// === Obter cookies ===
const rawHeaders = response.headers;
let setCookies = [];
if (typeof rawHeaders.getSetCookie === "function") {
setCookies = rawHeaders.getSetCookie();
}
// fallback (se disponível)
else if (rawHeaders.raw) {
setCookies = rawHeaders.raw()["set-cookie"] || [];
}
console.log("\n===== COOKIES DA RESPOSTA =====\n");
setCookies.forEach((c) => {
const cookiePair = c.split(";")[0];
console.log(cookiePair);
});
// === Apenas cookies TS ===
const tspdCookies = setCookies
.map((c) => c.split(";")[0])
.filter((c) => c.startsWith("TS"));
console.log("\n===== COOKIES TSPD =====\n");
console.log(tspdCookies);
}
main().catch(console.error);
Importante:
Se o servidor retornar cookies no seguinte formato (três ou quatro linhas):
TS386a400d029=082670...87599c;
TS386a400d029=082670...40a8ea3;
TS386a400d078=082670...b4cbe2c;
TSd2153684027=082670...4415a6
TS386a400d029=08777...83ff9,
TS386a400d029=08777...fb459e,
TSd2153684027=08777...f0ad368
ou:
TS014d0691=01fef...1244b,
TS01fe94e8=01fef...9ed38,
TSafd868f7027=082670...a7ea7c
e, ao mesmo tempo, o cookie TSPD_101_DID estiver ausente, isso indica que a requisição foi processada pelo mecanismo de proteção e uma página de bloqueio (TSPD challenge) foi retornada. Nesse caso, é necessário:
- Enviar o conjunto de cookies obtido para o CapMonster Cloud.
- Aguardar o resultado da resolução.
- Utilizar os cookies atualizados para as requisições subsequentes (veja abaixo exemplos de resolução automática de TSPD).
Como obter o Base64 da página
Depois de obter o HTML da página com o TSPD-challenge, é necessário codificá-lo em Base64. Isso pode ser feito usando várias ferramentas ou bibliotecas de programação. Abaixo está um exemplo em Node.js que realiza essa tarefa:
Exemplo em Node.js
const url =
"https://example.com/login";
// === Defina os cabeçalhos necessários ===
const headers = {
"sec-ch-ua":
'"Not(A:Brand";v="8", "Chromium";v="150", "Google Chrome";v="150"',
"sec-ch-ua-mobile": "?0",
"sec-ch-ua-platform": '"Windows"',
"Upgrade-Insecure-Requests": "1",
"user-agent":
"userAgentPlaceholder",
accept:
"text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.7",
"sec-fetch-site": "same-site",
"sec-fetch-mode": "navigate",
"sec-fetch-user": "?1",
"sec-fetch-dest": "document",
"accept-language": "en-US",
priority: "u=0,i",
referer: "https://example.com/"
};
async function main() {
const response = await fetch(url, {
method: "GET",
headers,
redirect: "follow",
});
if (!response.ok) {
throw new Error(`HTTP error: ${response.status}`);
}
// Obtém o HTML completo
const html = await response.text();
// Codifica em Base64
const base64 = Buffer.from(html, "utf-8").toString("base64");
console.log("===== RESULTADO BASE64 =====\n");
console.log(base64);
}
main().catch(console.error);
Exemplos de resolução automática do TSPD
Os exemplos têm caráter demonstrativo e mostram a lógica geral de funcionamento com sites que utilizam a proteção TSPD. Em projetos reais, o código pode exigir adaptação para um site específico, suas requisições e cabeçalhos.
Dados importantes (chaves de API, configurações de proxy, etc.) devem ser armazenados em arquivos .env ou em variáveis de ambiente.
Como o algoritmo funciona:
-
Primeira requisição. O script envia uma requisição HTTP para a página através de um proxy com cabeçalhos de navegador.
-
Obtenção de cookies. Os cookies de proteção necessários são extraídos da resposta. Se o cookie
TSPD_101_DIDfor retornado (indicando que a proteção já foi concluída) ou o formato for inválido, a execução é interrompida. -
Criação da tarefa. O script envia para o CapMonster Cloud uma tarefa do tipo CustomTask (class: tspd) com os seguintes dados:
-
URL da página
-
cookies de proteção
-
HTML da página (Base64)
-
User-Agent
-
proxy
-
-
Obtenção da solução. O script aguarda o resultado via API (getTaskResult) e recebe cookies válidos.
-
Requisição final. A requisição é repetida com os cookies obtidos, após o que uma página HTML normal é retornada.
- JavaScript
- Python
Mostrar código (Node.js)
import { gotScraping } from "got-scraping";
import fs from "fs";
// =========================================================
// CONFIGURAÇÃO (recomendado armazenar em arquivo separado ou variáveis de ambiente)
// =========================================================
const API_KEY = "YOUR_CAPMONSTER_API_KEY"; // Substitua pela sua chave API real do CapMonster Cloud
const CAPMONSTER_URL = "https://api.capmonster.cloud";
const url = "https://example.com"; // Substitua pela URL alvo onde há proteção TSPD
// Defina as configurações de proxy
const proxy = {
host: "your-proxy-address",
port: 1234,
login: "your-proxy-login",
password: "your-proxy-password",
type: "http"
};
const proxyUrl = `${proxy.type}://${proxy.login}:${proxy.password}@${proxy.host}:${proxy.port}`;
// User-Agent para simular um navegador Chrome real
const userAgent =
"userAgentPlaceholder";
// =========================================================
// FUNÇÕES AUXILIARES
// =========================================================
function delay(ms) {
return new Promise((resolve) => setTimeout(resolve, ms));
}
function extractValidTspdCookies(setCookies) {
/** Extrair cookies dos cabeçalhos Set-Cookie */
const cookies = setCookies.map((c) => c.split(";")[0].trim());
console.log("\nCookies recebidos:");
console.log(cookies);
// Extrair todos os cookies começando com "TS"
const tsCookies = cookies.filter((c) => c.startsWith("TS"));
// Verificação de bloqueio - TSPD_101_DID indica bloqueio
const hasDid = cookies.some((c) => c.startsWith("TSPD_101_DID="));
if (hasDid) {
console.log("TSPD_101_DID detectado. A requisição foi bloqueada.");
return null;
}
// Validar formato dos cookies TS
const validFormat = tsCookies.every((c) => /^[^=]+=[^=]+$/.test(c));
if (!validFormat) {
console.log("Formato inválido de cookies TS.");
return null;
}
console.log("Conjunto válido de cookies TSPD detectado.");
return tsCookies.join("; ");
}
function solutionToCookieHeader(solution) {
/** Extrair cookies do resultado da solução */
const domain = Object.keys(solution.domains)[0];
const cookies = solution.domains[domain].cookies || {};
const result = [];
for (const [name, value] of Object.entries(cookies)) {
result.push(`${name}=${value}`);
}
return result.join("; ");
}
// =========================================================
// FUNÇÕES PRINCIPAIS PARA INTERAÇÃO COM CAPMONSTER CLOUD
// =========================================================
async function createTask(task) {
/** Criar tarefa no CapMonster Cloud para resolver TSPD */
const response = await gotScraping
.post(`${CAPMONSTER_URL}/createTask`, {
json: {
clientKey: API_KEY,
task,
},
})
.json();
if (response.errorId !== 0) {
throw new Error(response.errorDescription);
}
return response.taskId;
}
async function getTaskResult(taskId) {
/** Obter resultado da solução TSPD do CapMonster Cloud */
while (true) {
await delay(3000);
const response = await gotScraping
.post(`${CAPMONSTER_URL}/getTaskResult`, {
json: {
clientKey: API_KEY,
taskId,
},
})
.json();
if (response.errorId !== 0) {
throw new Error(response.errorDescription);
}
if (response.status === "ready") {
return response.solution;
}
console.log("Aguardando solução...");
}
}
// =========================================================
// FUNÇÃO PRINCIPAL
// =========================================================
async function main() {
/** Função principal para bypass da proteção TSPD */
try {
console.log("Enviando requisição inicial...");
// Primeira requisição para obter a proteção TSPD
const response = await gotScraping(url, {
proxyUrl,
headers: {
"sec-ch-ua":
'"Not:A-Brand";v="99", "Google Chrome";v="150", "Chromium";v="150"',
"sec-ch-ua-mobile": "?0",
"sec-ch-ua-platform": '"Windows"',
"upgrade-insecure-requests": "1",
"user-agent": userAgent,
accept:
"text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.7",
"sec-fetch-site": "same-site",
"sec-fetch-mode": "navigate",
"sec-fetch-user": "?1",
"sec-fetch-dest": "document",
"accept-language": "en-US",
},
});
let html = response.body;
const htmlBase64 = Buffer.from(html).toString("base64");
const setCookies = response.headers["set-cookie"] || [];
const tspdCookies = extractValidTspdCookies(setCookies);
if (!tspdCookies) {
console.log(
"Interrompendo script. Nenhum cookie TSPD válido detectado. Continuando interação normal com o site.",
);
return;
}
// Formação da tarefa para o CapMonster Cloud
const task = {
type: "CustomTask",
class: "tspd",
websiteUrl: url,
metadata: {
tspdCookie: tspdCookies,
htmlPageBase64: htmlBase64,
},
userAgent,
proxyType: proxy.type,
proxyAddress: proxy.host,
proxyPort: proxy.port,
proxyLogin: proxy.login,
proxyPassword: proxy.password,
};
console.log("\nCriando tarefa no CapMonster Cloud...");
const taskId = await createTask(task);
console.log("ID da tarefa:", taskId);
// Obter resultado
const solution = await getTaskResult(taskId);
console.log("\nSolução recebida:");
console.log(JSON.stringify(solution, null, 2));
// Extrair cookies da solução
const cookieHeader = solutionToCookieHeader(solution);
console.log("\nCabeçalho Cookie final:");
console.log(cookieHeader);
// Formar cabeçalhos finais
const finalHeaders = {
"sec-ch-ua":
'"Not:A-Brand";v="99", "Google Chrome";v="150", "Chromium";v="150"',
"sec-ch-ua-mobile": "?0",
"sec-ch-ua-platform": '"Windows"',
"upgrade-insecure-requests": "1",
"user-agent": userAgent,
accept:
"text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.7",
"sec-fetch-site": "same-site",
"sec-fetch-mode": "navigate",
"sec-fetch-user": "?1",
"sec-fetch-dest": "document",
"accept-encoding": "gzip, deflate, br, zstd",
"accept-language": "en-US",
cookie: cookieHeader,
priority: "u=0,i",
"Upgrade-Insecure-Requests": "1",
};
console.log("\nCabeçalhos finais da requisição:");
console.log(JSON.stringify(finalHeaders, null, 2));
// Requisição final com os cookies obtidos
const finalResponse = await gotScraping(url, {
proxyUrl,
headers: finalHeaders,
followRedirect: true,
});
console.log("\nTamanho da página final:", finalResponse.body.length);
// Salvar página
fs.writeFileSync("final_page.html", finalResponse.body);
console.log("Página salva em final_page.html");
console.log("\n" + "=".repeat(60));
console.log("RESULTADO:");
console.log(JSON.stringify({ cookies: cookieHeader }, null, 2));
console.log("=".repeat(60));
} catch (err) {
console.error("Erro:", err.message);
}
}
main();
Mostrar código
import asyncio
import base64
import json
import aiohttp
from urllib.parse import urlparse
# =========================================================
# CONFIGURAÇÃO (recomendado armazenar em arquivo separado ou variáveis de ambiente)
# =========================================================
API_KEY = "YOUR_CAPMONSTER_API_KEY" # Substitua pela sua chave API real do CapMonster Cloud
BASE_URL = "https://example.com" # Substitua pela URL alvo onde há proteção TSPD
CAPMONSTER_URL = "https://api.capmonster.cloud"
USER_AGENT = "userAgentPlaceholder"
# Defina as configurações de proxy
PROXY = {
"host": "your-proxy-address",
"port": 1234,
"login": "your-proxy-login",
"password": "your-proxy-password",
"type": "http"
}
# =========================================================
# CLASSE PRINCIPAL
# =========================================================
class TSPDBypass:
"""Classe para resolver TSPD usando CapMonster Cloud"""
def __init__(self):
self.domain = urlparse(BASE_URL).hostname
def build_headers(self, cookies=None):
"""Construir cabeçalhos HTTP para a requisição"""
headers = {
"Host": self.domain,
"User-Agent": USER_AGENT,
"Accept": "text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8",
"Accept-Language": "en-US",
"Accept-Encoding": "gzip, deflate, br",
"Connection": "keep-alive",
"Upgrade-Insecure-Requests": "1",
"sec-ch-ua": '"Google Chrome";v="150", "Not.A/Brand";v="8", "Chromium";v="150"',
"sec-ch-ua-mobile": "?0",
"sec-ch-ua-platform": '"Windows"',
}
if cookies:
headers["Cookie"] = cookies
return headers
def build_proxy_url(self):
"""Construir URL de conexão com o proxy"""
if not PROXY.get("host"):
return None
return f"{PROXY['type']}://{PROXY['login']}:{PROXY['password']}@{PROXY['host']}:{PROXY['port']}"
@staticmethod
def extract_ts_cookies(set_cookie_headers):
"""Extrair cookies dos cabeçalhos Set-Cookie"""
cookies = [line.split(";", 1)[0].strip() for line in set_cookie_headers if "=" in line.split(";", 1)[0]]
return "; ".join(cookies)
def extract_solution_cookies(self, solver_result):
"""Extrair cookies do resultado da solução do captcha"""
solution = solver_result["solution"]
domains = solution.get("Domains") or solution.get("domains")
cookies_dict = domains[self.domain].get("Cookies") or domains[self.domain].get("cookies")
return "; ".join([f"{k}={v}" for k, v in cookies_dict.items()])
async def request_page(self, cookies=None):
"""Executar requisição HTTP para o site alvo"""
proxy = self.build_proxy_url()
async with aiohttp.ClientSession(
connector=aiohttp.TCPConnector(ssl=False),
cookie_jar=aiohttp.DummyCookieJar()
) as session:
async with session.get(
BASE_URL,
headers=self.build_headers(cookies),
proxy=proxy,
allow_redirects=True
) as response:
html = await response.text()
tspd_cookies = self.extract_ts_cookies(response.headers.getall("Set-Cookie", []))
is_tspd = "/TSPD/" in html or "TSPD_101" in html or "tspd" in html.lower()
return {
"success": not is_tspd,
"html": html,
"html_base64": base64.b64encode(html.encode()).decode(),
"cookies": tspd_cookies
}
async def create_task(self, html_page_base64, tspd_cookie):
"""Criar tarefa no CapMonster Cloud para resolver TSPD"""
payload = {
"clientKey": API_KEY,
"task": {
"type": "CustomTask",
"class": "tspd",
"websiteUrl": BASE_URL,
"userAgent": USER_AGENT,
"metadata": {
"tspdCookie": tspd_cookie,
"htmlPageBase64": html_page_base64
},
"proxyType": PROXY.get("type"),
"proxyAddress": PROXY.get("host"),
"proxyPort": PROXY.get("port"),
"proxyLogin": PROXY.get("login"),
"proxyPassword": PROXY.get("password")
}
}
async with aiohttp.ClientSession(cookie_jar=aiohttp.DummyCookieJar()) as session:
async with session.post(
f"{CAPMONSTER_URL}/createTask",
json=payload,
headers={"Content-Type": "application/json"}
) as response:
text = await response.text()
try:
data = json.loads(text)
except json.JSONDecodeError:
print(f"Erro: Resposta não-JSON recebida: {text}")
raise
if data.get("errorId") != 0:
raise Exception(data)
return data["taskId"]
async def get_result(self, task_id):
"""Obter resultado da solução TSPD do CapMonster Cloud"""
async with aiohttp.ClientSession(cookie_jar=aiohttp.DummyCookieJar()) as session:
while True:
payload = {"clientKey": API_KEY, "taskId": task_id}
async with session.post(
f"{CAPMONSTER_URL}/getTaskResult",
json=payload,
headers={"Content-Type": "application/json"}
) as response:
text = await response.text()
try:
data = json.loads(text)
except json.JSONDecodeError:
print(f"Erro: Resposta não-JSON recebida: {text}")
raise
if data.get("errorId") != 0:
raise Exception(data)
if data["status"] == "ready":
return data
await asyncio.sleep(5)
async def bypass(self):
"""Método principal para resolver TSPD"""
print("Enviando requisição inicial...")
# Primeira requisição para obter a proteção TSPD
first_response = await self.request_page()
html = first_response["html"]
html_base64 = first_response["html_base64"]
tspd_cookies = first_response["cookies"]
print("\nCookies recebidos:")
print(tspd_cookies)
# Verificação de bloqueio
if "TSPD_101_DID=" in tspd_cookies:
print("TSPD_101_DID detectado. A requisição foi bloqueada.")
return {"success": False, "cookies": tspd_cookies, "html": html}
# Validar formato dos cookies TS
ts_cookies = [c for c in tspd_cookies.split("; ") if c.startswith("TS")]
valid_format = all("=" in c for c in ts_cookies)
if not valid_format:
print("Formato inválido de cookies TS.")
return {"success": False, "cookies": tspd_cookies, "html": html}
print("Conjunto válido de cookies TSPD detectado.")
# Criar tarefa no CapMonster Cloud
print("\nCriando tarefa no CapMonster Cloud...")
first_solver = await self.create_task(html_base64, tspd_cookies)
print("ID da tarefa:", first_solver)
# Obter resultado
first_result = await self.get_result(first_solver)
print("\nSolução recebida:")
print(json.dumps(first_result["solution"], indent=2, ensure_ascii=False))
# Extrair cookies da solução
final_cookies = self.extract_solution_cookies(first_result)
print("\nCabeçalho Cookie final:")
print(final_cookies)
# Construir cabeçalhos finais
final_headers = self.build_headers(final_cookies)
final_headers["sec-ch-ua"] = '"Google Chrome";v="150", "Not.A/Brand";v="8", "Chromium";v="150"'
final_headers["sec-ch-ua-mobile"] = "?0"
final_headers["sec-ch-ua-platform"] = '"Windows"'
final_headers["Upgrade-Insecure-Requests"] = "1"
final_headers["Accept"] = "text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8"
final_headers["Accept-Encoding"] = "gzip, deflate, br, zstd"
final_headers["Accept-Language"] = "en-US"
final_headers["priority"] = "u=0,i"
print("\nCabeçalhos finais da requisição:")
print(json.dumps(final_headers, indent=2, ensure_ascii=False))
# Requisição final com os cookies obtidos
final_response = await self.request_page(final_cookies)
print("\nTamanho da página final:", len(final_response["html"]))
# Salvar página
with open("final_page.html", "w", encoding="utf-8") as f:
f.write(final_response["html"])
print("Página salva em final_page.html")
return {
"cookies": final_cookies,
"html": final_response["html"]
}
async def main():
"""Função principal"""
bypasser = TSPDBypass()
try:
result = await bypasser.bypass()
print("\n" + "="*60)
print("RESULTADO:")
print(json.dumps({"cookies": result["cookies"]}, indent=4, ensure_ascii=False))
print("="*60)
except Exception as err:
print("Erro:", str(err))
if __name__ == "__main__":
asyncio.run(main())
