Crearé tareas genuinas de benchmark de Terminal Hard y SWE Bench
evaluación con IA
Acerca de este Servicio
Soy un autor experimentado de Terminal Bench y benchmarks de SWE Bench.
He creado y enviado 32 tareas duras de Terminal-Bench 2.1 a través de la plataforma Snorkel AI para entrenamiento y evaluación de agentes de frontera de IA, de las cuales 21 fueron aceptadas.
He sido seleccionado como revisor para la revisión de tareas de benchmark SWE-bench para apoyar la revisión de calidad y preparación de las tareas. Revisé 83 tareas enviadas de SWE-bench e implementé correcciones cuando fue necesario.
También he enviado 21 tareas de benchmark SWE Bench, y 17 fueron aceptadas de ellas
También he creado 13 tareas de Terminal Bench 3.0 hasta ahora.
Hasta ahora se han creado 18 tareas de Terminal Bench 4.0.
En este gig estoy ofreciendo tareas de los siguientes benchmarks:
- Terminal Bench 2.1
- Terminal Bench 3.0
- Terminal Bench 4.0
- SWE Bench
Hay tres paquetes (Básico, Estándar y Premium) que contienen distinto número de tareas en cada paquete.
Garantizo tareas de alta calidad y dificultad genuina alta (evitando fallos falsos) sin importar el paquete que compres.

