Un informe de Siteline prob贸 a un agente de Claude en 100 de los principales productos de software B2B. Descubri贸 que errores de acceso y precios ocultos hac铆an que el agente visitara sitios de terceros en busca de informaci贸n que no pod铆a encontrar en las p谩ginas oficiales.
El informe, elaborado por el fundador de Siteline, David Kaufman, implic贸 ejecutar un agente Claude simulado a trav茅s de 534 intentos para descubrir los precios mensuales de todos los planes y resaltar las caracter铆sticas principales.
Los datos llegan a la etapa del embudo que la mayor铆a de la cobertura de visibilidad de los agentes pasa por alto, despu茅s de que un comprador conoce su producto y env铆a a un agente para verificar los precios y las caracter铆sticas.
Siteline vende an谩lisis de agentes y una herramienta de preparaci贸n de agentes de inteligencia artificial, por lo que tiene un inter茅s comercial en descubrir que muchos sitios no est谩n preparados para los agentes.
Lo que se le pidi贸 que hiciera al agente de Siteline
Siteline prob贸 20 productos en cinco categor铆as: productividad, herramientas de desarrollo, marketing y ventas, atenci贸n al cliente y an谩lisis. Verific贸 si el agente pod铆a acceder al sitio, recuperar planes y precios, y determinar costos en tokens y llamadas de herramientas.
En la mediana, una ejecuci贸n en Sonnet 4.6 tom贸 alrededor de 32 segundos y $0,24, con tres llamadas a la herramienta de b煤squeda o recuperaci贸n. Siteline muestra una diferencia de tiempo de 2,2 veces y de costo de 4,2 veces entre la d茅cima parte de las ejecuciones m谩s r谩pidas y las m谩s lentas, principalmente debido a las llamadas de b煤squeda web. Linear fue m谩s eficiente, analizando cuatro planes en una sola b煤squeda por aproximadamente $0,11 en el sitio de la compa帽铆a.
Los errores de acceso empujaron al agente hacia terceros
Alrededor del 30% de las ejecuciones enfrentan al menos un error al obtener o buscar en un sitio, y aproximadamente una cuarta parte de esos errores son denegaciones de acceso por bloqueo de bots o p谩ginas ilegibles. La mayor铆a de los reintentos se recuperan, pero el 5% abandona el sitio de la marca en busca de fuentes de terceros, que seg煤n el informe pueden estar obsoletas o incorrectas.
Los errores provocaron una gran brecha en el contenido, ya que las ejecuciones con errores de acceso extrajeron el 58% del contenido de fuentes de terceros, en comparaci贸n con el 12% de las ejecuciones sin errores. Notas de la l铆nea del sitio Anthropic y OpenAI no ejecutan JavaScript, a diferencia de Google. SEJ cubri贸 datos de Vercel que muestran que los rastreadores de inteligencia artificial representan el 28% del volumen de los robots de Google. Los datos de Siteline muestran que el 13% de las ejecuciones inclu铆an menciones internas de JavaScript o problemas de renderizado, que no se cuentan como errores. SEJ tambi茅n destac贸 que un tercio de las principales p谩ginas de inicio de fintech devolv铆an poco contenido, lo que revela un punto ciego de JavaScript.
Los ejemplos muestran esto: la p谩gina de precios de Zendesk se carg贸, pero la tabla del plan estaba renderizada en JavaScript, seg煤n el informe, lo que la hac铆a ilegible para el agente, quien luego depend铆a de blogs de terceros por cinco veces el costo de Linear. Las b煤squedas de precios de Coda fallaron, lo que llev贸 al agente a utilizar p谩ginas de terceros. El agente de Braze no pudo acceder a la p谩gina de precios y obtuvo n煤meros de G2 y Vendr.
Un caso propone una opci贸n sencilla. Siteline afirma que el agente utiliz贸 una URL de precios inexistente, que no aparec铆a en los resultados de b煤squeda y luego depend铆a de terceros. El informe recomienda mantener activa una p谩gina de precios, incluso si no muestra los precios.
Donde las p谩ginas de precios se quedaron cortas
En todas las tiradas, el 65% de los planes mostraron precios legibles, mientras que el 14% no public贸 precios y se dirigi贸 a un contacto de ventas. Alrededor del 30% de los productos de marketing, ventas y atenci贸n al cliente no ten铆an precios, a diferencia de cero en productividad y herramientas de desarrollo.
Un bot贸n ‘Contactar con ventas’ es un callej贸n sin salida para los agentes del comprador que comparan precios. Siteline sugiere que puede permitir a los agentes recomendar competidores con tarifas p煤blicas. Las pruebas revelan problemas: la p谩gina de FullStory carec铆a de precios y Databricks era la m谩s cara a 0,95 d贸lares por ejecuci贸n, con tarifas de pago por uso ocultas detr谩s de una calculadora inaccesible, redirigiendo a terceros.
Por qu茅 esto importa
Una tabla de planes cargada en el lado del cliente puede parecer vac铆a para los agentes, incluso si parece completa en el navegador. Las correcciones de Siteline, cubiertas por SEJ, incluyen renderizar precios y caracter铆sticas del lado del servidor y resaltar detalles clave con anticipaci贸n, ya que los agentes generalmente obtienen solo los primeros 15,000 a 20,000 tokens. Siteline tambi茅n recomienda llms.txt, pero la orientaci贸n de Google var铆a y su valor sigue siendo incierto con datos independientes.
Siteline se encuentra entre los proveedores que ofrecen puntuaci贸n de preparaci贸n de los agentes, una categor铆a que SEJ examin贸 cuando Cloudflare lanz贸 su propio esc谩ner. El punto de referencia eval煤a un modelo en una sola tarea, midiendo el acceso de los agentes a sitios espec铆ficos, no c贸mo todos los agentes manejan cada producto.
Mirando hacia el futuro
A medida que m谩s compradores hacen que los agentes comparen planes antes de realizar ventas, los sitios con detalles del plan claros y legibles en la primera vista ayudan a los agentes a representar con confianza. La pregunta es si las medidas de preparaci贸n de los agentes se basar谩n en m茅tricas compartidas o divergir谩n entre los cuadros de mando de los proveedores, cada uno de los cuales se centrar谩 en diferentes se帽ales.
Imagen destacada: Vasiliev Alexandr/Shutterstock
