AETHER · Benchmark y Validación

Menos fichas.Resultados medidos.

Medimos Aether Compress no solo por cuánto se reduce, sino por cuánto conserva la información necesaria durante la reducción. Nuestros resultados se evalúan a través de pruebas locales a gran escala y validación independiente del modelo.

40,65%
reducción promedio de insumos
100K+
escenario de prueba
100%
éxito de la protección de la información
3,48 ms
tiempo promedio de procesamiento
Arquitectura de autenticación

Dos capas diferentes de pruebas.

Pruebas de verificación local de pérdida de información a escala. La validación del modelo externo es el modelo generado a partir del contexto optimizado. Mide si la respuesta contiene la misma información que el contexto original.

Capa 01
Verificación Local
100.000
escenario de prueba
100%
exitoso
40,65%
reducción promedio
52,67%
máximo medido
3,48 ms
tiempo promedio
Capa 02
Verificación de modelo externo
500 / 500
escenario verificado
100%
precisión de respuesta medida
25,13%
reducción en el grupo seleccionado
500
prueba completada
0
prueba fallida
¿Por qué las tarifas son diferentes? 40,65% de un conjunto de validación local de 100.000 escenarios es el promedio. El 25,13% son seleccionados para la verificación externa del modelo. Es una medición de un subconjunto separado de 500 escenarios. Dos valores son la misma prueba. No representa al grupo.
Reducción de entrada

OrtalamaUn 40,65% menos.

El valor medido indica que la entrada optimizada es igual a la entrada original. Muestra la disminución promedio en la cantidad de tokens.

Entrada original
100%
Después de Aether
59,35%
Normal
Optimizado
reducido%40,65
Medida 01
ser más pequeñoNo es sólo éxito.

Al evaluar Aether Compress, no solo se mide la reducción de tokens. La condición principal de éxito es que el contexto optimizado conserve la información necesaria.

Medida 02
respuesta finaltambién se verifica.

En la capa de validación externa, la misma pregunta es válida tanto para el original como para el evaluado en el contexto optimizado y Se mide si las respuestas retienen la información necesaria.

Kapsam

Un solo tipo de contenidoNo medimos según.

El conjunto de prueba tiene diferentes propiedades de densidad, estructura y contexto. Consta de escenarios con

01
Información directa
02
Información múltiple
03
Contexto largo
04
Orientado a consultas
05
Contenido estructural
06
Contenido técnico
07
Contexto del código
08
Contenido mixto
09
Contenido repetitivo
10
Baja redundancia
11
Alta redundancia
12
Estados límite
Metodoloji

Misma medición, proceso repetible.

Entrada original del proceso de referencia, entrada optimizada y mida el resultado de la verificación por separado.

01
Orijinal

La entrada de prueba se toma como referencia sin cambios.

02
Optimize

La misma entrada se procesa con Aether Compress.

03
Comparar

La reducción de tokens y la preservación de la información se miden por separado.

04
verificar

Las pruebas seleccionadas también se verifican a través del modelo externo.

Leyendo los resultados

Límites de medición

40,65% no es garantía

La tasa de reducción varía según la estructura de la entrada y la cantidad de información innecesaria que contiene.

3,48 ms no es latencia universal

Este valor es el tiempo de procesamiento promedio medido en el entorno de validación. Puede variar según el hardware y la carga de trabajo.

52,67% es la medida máxima

Este valor representa la limitación más alta observada en el conjunto de validación y no es la tasa esperada para cada solicitud.

Precisión medida

El valor del 100% en la validación externa es el resultado de 500 escenarios probados y no implica una garantía de todas las entradas posibles ilimitadas.

Mida con sus propios datos

Más importante que el punto de referencia,su aporte.

Prueba Aether Compress de forma gratuita y ve cuántos tokens puedes reducir en tu propio contexto real.

Pruébalo gratis
No se requiere tarjeta de crédito
1 millón de fichas gratis