Te dicen que ya apareces en ChatGPT. ¿Con qué lo comprueban?

La pregunta útil no es quién promete hacerte aparecer, sino con qué instrumento lo comprueba y qué hace cuando ese instrumento se equivoca.

Llevamos meses midiendo esto todos los días, para varias empresas a la vez. Estas son tres cosas que aprendimos haciéndolo, y que cambian qué le vas a exigir a quien contrates.

Desde dónde se mide cambia lo que se ve

Un rastreador que visita tu sitio deja huella en el camino de la petición, antes de que la página se arme. Por eso nuestro registro de visitas de rastreadores vive en el borde, en la infraestructura por la que pasa cada petición del sitio, y no como una etiqueta dentro de la página.

Esa decisión tiene consecuencias prácticas que se ven en la operación: los archivos estáticos ni se evalúan, porque un rastreador no pide una hoja de estilos; la cadena de consulta se descarta, porque a veces lleva correos y no es dato que queramos tener; y el registro de qué cuenta como rastreador va embebido y versionado, porque una lista que cambia sin aviso rompe la comparabilidad de la serie sin que nadie se entere.

Qué exigir: que te digan en qué punto miden, y desde qué fecha la serie es comparable.

Un instrumento puede reportar cero donde sí hay dato

En septiembre encontramos que una de nuestras variables reportaba cero en siete cuentas del portafolio que sí tenían el marcado puesto y correcto. La causa no era el trabajo hecho: era nuestro propio lector, que exigía comillas en un atributo del marcado. Ciertos generadores de sitios las quitan al minificar, y el estándar permite el valor sin comillas. El resultado se correlacionaba con el motor del sitio, no con lo que cada quien había construido.

Lo corregimos enumerando de forma explícita las tres formas válidas, con diez casos de prueba, y volvimos a correr la medición en todas las cuentas. El piso se movió donde tenía que moverse, y debajo del cero aparecieron hallazgos reales que llevaban semanas tapados.

Qué exigir: que quien te mida tenga pruebas de su propio instrumento, y que te cuente cuándo se equivocó. Un proveedor que nunca ha encontrado un error en su medición no ha mirado.

Lo que hoy no se puede medir, y por qué decirlo importa

Nuestra fórmula declara, variable por variable, con qué instrumento se mide cada una. Y declara también cuáles no tienen ninguno. Hoy, por ejemplo, ningún instrumento nuestro mide menciones editoriales ni relaciones públicas: se puede razonar sobre ellas, no medirlas, y por eso no entran como si fueran dato.

Un hueco dicho es información. Un hueco rellenado con un cero es un error que se ve como diagnóstico.

Qué exigir: la lista de lo que su método no mide. Si no la tienen, no es que midan todo.

Cinco preguntas antes de contratar a alguien

1. ¿En qué punto miden la visita de un rastreador, y desde cuándo la serie es comparable?
2. ¿Qué hace su instrumento cuando el dato está y no lo ve? ¿Tienen pruebas de eso?
3. ¿Qué variables de su método no tienen instrumento hoy?
4. ¿Qué declararon antes de publicar, para poder atribuir después?
5. ¿Con qué me van a enseñar el resultado, y puedo volver del número al documento que lo produjo?

Para quién sí y para quién no

Para quién sí: empresas que ya publican y quieren saber si eso les está sirviendo, y que prefieren un número incómodo a uno bonito.

Para quién no: quien busca una garantía de aparecer en un motor. No existe, y quien la ofrezca está vendiendo algo que no controla.