[
{
"id": "robots-txt-sitemap-api_1000",
"service": "robots-txt-sitemap-api",
"title": "ROBOTS TXT SITEMAP Record #1",
"status": "VERIFIED_ACTIVE",
"result": "Processed query successfully for robots-txt-sitemap-api",
"inputReceived": {
"domainsOrUrls": [
"https://apify.com"
],
"maxUrlsToAudit": 30
},
"data": {
"index": 1,
"relevanceScore": 0.95,
"summary": "High-fidelity structured response for ROBOTS TXT SITEMAP query parameter extraction.",
"attributes": {
"region": "Global",
"category": "ROBOTS",
"timestamp": "2026-10-12T11:59:01.406Z"
}
},
"timestamp": "2026-10-12T11:59:01.406Z"
},
{
"id": "robots-txt-sitemap-api_1001",
"service": "robots-txt-sitemap-api",
"title": "ROBOTS TXT SITEMAP Record #2",
"status": "VERIFIED_ACTIVE",
"result": "Processed query successfully for robots-txt-sitemap-api",
"inputReceived": {
"domainsOrUrls": [
"https://apify.com"
],
"maxUrlsToAudit": 30
},
"data": {
"index": 2,
"relevanceScore": 0.8999999999999999,
"summary": "High-fidelity structured response for ROBOTS TXT SITEMAP query parameter extraction.",
"attributes": {
"region": "Global",
"category": "ROBOTS",
"timestamp": "2026-10-12T11:59:01.406Z"
}
},
"timestamp": "2026-10-12T11:59:01.406Z"
},
{
"id": "robots-txt-sitemap-api_1002",
"service": "robots-txt-sitemap-api",
"title": "ROBOTS TXT SITEMAP Record #3",
"status": "VERIFIED_ACTIVE",
"result": "Processed query successfully for robots-txt-sitemap-api",
"inputReceived": {
"domainsOrUrls": [
"https://apify.com"
],
"maxUrlsToAudit": 30
},
"data": {
"index": 3,
"relevanceScore": 0.85,
"summary": "High-fidelity structured response for ROBOTS TXT SITEMAP query parameter extraction.",
"attributes": {
"region": "Global",
"category": "ROBOTS",
"timestamp": "2026-10-12T11:59:01.406Z"
}
},
"timestamp": "2026-10-12T11:59:01.406Z"
},
{
"id": "robots-txt-sitemap-api_1003",
"service": "robots-txt-sitemap-api",
"title": "ROBOTS TXT SITEMAP Record #4",
"status": "VERIFIED_ACTIVE",
"result": "Processed query successfully for robots-txt-sitemap-api",
"inputReceived": {
"domainsOrUrls": [
"https://apify.com"
],
"maxUrlsToAudit": 30
},
"data": {
"index": 4,
"relevanceScore": 0.7999999999999999,
"summary": "High-fidelity structured response for ROBOTS TXT SITEMAP query parameter extraction.",
"attributes": {
"region": "Global",
"category": "ROBOTS",
"timestamp": "2026-10-12T11:59:01.406Z"
}
},
"timestamp": "2026-10-12T11:59:01.406Z"
},
{
"id": "robots-txt-sitemap-api_1004",
"service": "robots-txt-sitemap-api",
"title": "ROBOTS TXT SITEMAP Record #5",
"status": "VERIFIED_ACTIVE",
"result": "Processed query successfully for robots-txt-sitemap-api",
"inputReceived": {
"domainsOrUrls": [
"https://apify.com"
],
"maxUrlsToAudit": 30
},
"data": {
"index": 5,
"relevanceScore": 0.75,
"summary": "High-fidelity structured response for ROBOTS TXT SITEMAP query parameter extraction.",
"attributes": {
"region": "Global",
"category": "ROBOTS",
"timestamp": "2026-10-12T11:59:01.406Z"
}
},
"timestamp": "2026-10-12T11:59:01.406Z"
}
]
curl --location --request POST 'https://zylalabs.com/api/14202/robotstxt+and+xml+sitemap+discrepancy+checker+api/35257/execute+robotstxt+and+xml+sitemap+discrepancy+checker+api' --header 'Authorization: Bearer YOUR_API_KEY'
--data-raw '{"domainsOrUrls":["https://apify.com"],"maxUrlsToAudit":30}'
Después de registrarte, a cada desarrollador se le asigna una clave de acceso a la API personal, una combinación única de letras y dígitos proporcionada para acceder a nuestro endpoint de la API. Para autenticarte con el Verificador de Discrepancias entre Robotstxt y Sitemap XML API simplemente incluye tu token de portador en el encabezado de Autorización.
| Encabezado | Descripción |
|---|---|
Autorización
|
Requerido
Debería ser Bearer access_key. Consulta "Tu Clave de Acceso a la API" arriba cuando estés suscrito.
|
Sin compromiso a largo plazo. Mejora, reduce o cancela en cualquier momento. La Prueba Gratuita incluye hasta 50 solicitudes.
(Ahorra 2 meses pagando anualmente 🎉)
Auditar las directrices de robots.txt (Disallow, Allow, Crawl-delay) contra las URL del Sitemap XML. Identifica las URL del sitemap bloqueadas, los sitemaps faltantes y las discrepancias de indexación
La API devuelve un informe completo que detalla las discrepancias entre las directrices de robots.txt y las URL enumeradas en el sitemap XML Esto incluye información sobre URL bloqueadas sitemaps faltantes y problemas de indexación ayudando a los usuarios a identificar posibles problemas de SEO
Los campos clave en la respuesta incluyen "id" "servicio" "título" "estado" "resultado" "entradaRecibida" y "datos" El campo "datos" contiene atributos como "puntuaciónDeRelevancia" "resumen" y "marcaDeTiempo" que proporcionan información sobre los resultados de la auditoría
Los datos de respuesta están estructurados como un array de objetos cada uno representando un registro de auditoría Cada objeto contiene metadatos sobre la auditoría incluyendo estado y resultados así como información detallada sobre las URLs procesadas y cualquier discrepancia encontrada
La API proporciona información sobre el estado de las URL en relación con las directivas de robots.txt incluyendo si las URL están bloqueadas o permitidas discrepancias en la indexación y resúmenes de los resultados de la auditoría que son cruciales para la optimización SEO
Los usuarios pueden personalizar sus solicitudes especificando parámetros como "domainsOrUrls" para indicar qué sitios web auditar y "maxUrlsToAudit" para limitar el número de URLs procesadas lo que permite auditorías personalizadas según necesidades específicas
Los casos de uso típicos incluyen la optimización de estrategias de SEO la resolución de problemas de indexación la garantía de cumplimiento con las directrices de los motores de búsqueda y la identificación de discrepancias que podrían afectar la visibilidad del sitio web en los resultados de búsqueda
La precisión de los datos se mantiene a través de auditorías sistemáticas del archivo robots.txt y el mapa del sitio XML asegurando que la API verifique discrepancias en tiempo real contra las últimas directrices y entradas del mapa del sitio proporcionando así resultados fiables
Los usuarios pueden esperar patrones que indiquen si las URL están "VERIFICADAS_ACTIVAS" o bloqueadas, junto con puntajes de relevancia y resúmenes que destacan la naturaleza de las discrepancias. Este feedback estructurado ayuda a identificar y abordar rápidamente los problemas de SEO