📂 Categoría: AI,Tech,anthropic,openai,google,perplexity,microsoft,duckduckgo,bots,scrape,artificial-intelligence,generative-ai,web,websites,cloudflare,limited-synd | 📅 Fecha: 1783650432
🔍 En este artículo:
Al comienzo de cada trimestre, me comunico con Cloudflare para ver cómo las empresas de inteligencia artificial más importantes están tratando la web. Los últimos datos cuentan una historia conocida: la minería a cielo abierto continúa a buen ritmo.
Para la semana del 1 al 7 de julio, los últimos datos de «búsqueda de puntos de referencia» muestran que Anthropic sigue siendo el mayor valor atípico. Los robots de la empresa de inteligencia artificial rastrearon páginas web aproximadamente 2.800 veces por cada referencia devuelta.
OpenAI quedó muy atrás, seguida por Perplexity en tercer lugar. Luego hay otra gran caída para Microsoft, seguida de Google.
DuckDuckGo es uno de los únicos jugadores que se acerca a ofrecer un delicado equilibrio entre recibir de la web y devolver, con tres raspaduras por cada referencia, según datos de Cloudflare.
Un gráfico que muestra los índices de rastreo para la evaluación comparativa Llamarada de nube
Para Anthropic, hubo una mejora de alrededor de 8.800 a 1 a principios de abril. Sin embargo, una revisión rápida de otros períodos recientes de siete días muestra que Anthropic todavía está raspando como loco.
En los primeros días de mayo, por ejemplo, los robots de la compañía rastrearon sitios 24.700 veces por cada referencia. (¿Quizás algunos de sus robots se tomaron vacaciones de verano a principios de julio?)
La métrica de Cloudflare mide la frecuencia con la que los robots empresariales de IA solicitan rastrear páginas web en comparación con la frecuencia con la que sus servicios remiten a los usuarios a esos sitios. Estas cifras son un indicador importante de si los gigantes de la IA están manteniendo o socavando el mercado económico que históricamente impulsó la web, donde los sitios permitían el rastreo gratuito a cambio de tráfico.
En el nuevo mundo de la IA generativa, este es el negocio descomposición. Ahora, los motores de respuesta de IA y los chatbots brindan a los usuarios respuestas directas, lo que los hace menos propensos a visitar los sitios web que crearon el contenido en primer lugar. Esto reduce el incentivo financiero para publicar contenido de alta calidad en la web.
Anthropic se anuncia a sí misma como la empresa de IA más ética, pero estos datos sirven como recordatorio de que lo que es ético o no a veces depende de quien lo mira. Te dejaré decidir.
En los últimos meses, Anthropic ha criticado a sus competidores por utilizar los resultados de sus modelos de IA para desarrollar y mejorar sus propios modelos. Llama a estas técnicas “ataques de destilación” y dice que van en contra de sus términos de servicio.
Si damos un paso atrás, empezaremos a parecernos mucho a lo que Anthropic hizo con los sitios web: recopilar su contenido, a menudo en contra de los deseos de sus propietarios, y utilizarlo para desarrollar o mejorar sus propios productos.
Bienvenido a la web moderna, Anthropic. Es posible que tengas que acostumbrarte a que tus resultados se utilicen de maneras que no te gustan.
Nota: Anthropic ha cuestionado previamente la metodología de Cloudflare, diciendo que no pudo verificar los cálculos de la compañía y argumentando que la nueva búsqueda presenta mayores referencias.
Suscríbase al boletín Tech Memo de BI aquí. Contáctame por correo electrónico a abarr@businessinsider.com.
