ÁLVAROMAUREIRA

Argilla Presenta Plataforma Abierta de Curación de Datos para Alineación DPO y RLHF de LLMs

Publicado ·

El equipo de Argilla ha consolidado su plataforma abierta de curación de datos y anotación colaborativa como el estándar fundamental para la preparación de datasets de preferencias humanas y sintéticas, facilitando la alineación de modelos de lenguaje mediante técnicas de DPO, KTO y RLHF.

Curación Ágil de Preferencias y Feedback Humano en el Bucle

En el entrenamiento contemporáneo de modelos de lenguaje, la calidad de los datos de alineación supera con creces la simple cantidad de tokens. Argilla introduc

Sigue aprendiendo

Explora los recursos y continúa tu recorrido en la comunidad.

Únete gratis a la comunidad →

Sigue leyendo las noticias clave de IA

  1. Apple Presenta DCLM: Modelos Abiertos de 7B Entrenados con Curación Masiva de Datos que Superan a Llama 3Apple lanza DCLM-Baseline-7B, modelo abierto entrenado con curación masiva de datos limpios que supera a Llama 3 en benchmarks académicos como MMLU.Leer análisis completo
  2. JXNL Presenta Instructor: Biblioteca Estándar para Extracción Estructurada y Validación con Tipos Pydantic en LLMsJXNL presenta Instructor, biblioteca estándar para extracción de datos estructurados y validación estricta con Pydantic v2 en modelos de lenguaje.Leer análisis completo
  3. OpenPipe Presenta Plataforma de Destilación y Fine-Tuning de LLMs para ProducciónOpenPipe presenta una plataforma abierta para destilación de tráfico y ajuste fino de LLMs hacia modelos especializados compactos y económicos.Leer análisis completo
  4. Allen AI Presenta OLMo 7B: Modelo Abierto con Acceso Total a Datos Dolma, Código de Entrenamiento y PesosAllen AI lanza OLMo 7B, modelo fundacional abierto con acceso libre al corpus Dolma de 3 billones de tokens, código y pesos sin restricciones.Leer análisis completo
  5. Anthropic presenta Model Context Protocol (MCP): el estándar abierto que unifica la integración de herramientas y datos para asistentes de IAAnthropic liberó Model Context Protocol (MCP), un estándar abierto para conectar modelos de IA con fuentes de datos empresariales y herramientas locales.Leer análisis completo
  6. Allen AI Presenta OLMo 2: Modelos Fundacionales Abiertos de 7B y 13B con Transparencia Total en Datos y CódigoAllen AI lanza OLMo 2, modelos abiertos de 7B y 13B entrenados sobre 5 billones de tokens de Dolma con pesos, código y registros de entrenamiento públicos.Leer análisis completo
  7. Allen AI Presenta Tulu 2 DPO: Familia de Modelos Abiertos de Instrucción con Optimización de Preferencias DirectasAllen AI lanza Tulu 2 DPO, suite de modelos abiertos en 70B y 13B con alineación directa de preferencias y recetas transparentes que superan a Llama 2 Chat.Leer análisis completo
  8. Cerebras despliega CS-3 con Wafer Scale Engine 3: el procesador monolítico que supera los 1.800 tokens por segundo en inferencia de LLMsCerebras activó CS-3 con el procesador gigante WSE-3, logrando más de 1.800 tokens por segundo en inferencia para agentes conversacionales.Leer análisis completo
  9. Langfuse Presenta Plataforma Abierta de Observabilidad, Trazas de Ejecución y Métricas para LLMsLangfuse consolida la plataforma abierta de observabilidad para LLMs con trazas distribuidas, auditoría granular de costos por token y métricas de latencia.Leer análisis completo
  10. NVIDIA Presenta Megatron-Core: Biblioteca Optimizada de GPU para Entrenamiento y Escalado Masivo de LLMsNVIDIA libera Megatron-Core, suite modular para estandarizar paralelismo tensorial y de pipeline en LLMs, logrando más del 55% de MFU en clusters GPU.Leer análisis completo
  11. Together AI Presenta RedPajama Data v2: El Mayor Corpus Abierto con 30 Billones de Tokens y 40 Señales de CalidadTogether AI lanza RedPajama Data v2, corpus de 30 billones de tokens con más de 40 anotaciones de calidad para preentrenamiento de modelos abiertos soberanos.Leer análisis completo
  12. Upstage Presenta SOLAR 10.7B: Modelo Abierto con Arquitectura Depth Up-Scaling y Alineación DPOUpstage libera SOLAR 10.7B, modelo fundacional que escala arquitecturas de 7B a 10.7B mediante Depth Up-Scaling y alineación directa por preferencias.Leer análisis completo
  13. UncleCode Presenta Crawl4AI: Motor de Extracción Web Asíncrono y Conversión a Markdown para LLMsUncleCode presenta Crawl4AI, motor de rastreo web asíncrono ultrarrápido que extrae y convierte páginas web complejas directamente a Markdown para LLMs.Leer análisis completo
  14. Hugging Face Presenta LeRobot: Plataforma Abierta para Democratizar la Robótica con Aprendizaje por ImitaciónHugging Face lanza LeRobot, un marco abierto que proporciona modelos preentrenados, datasets y simulaciones para manipular robots físicos de bajo coste.Leer análisis completo
  15. Salesforce Presenta xGen-7B: Modelos de Lenguaje Abiertos Entrenados Nativamente con Contexto de 8K TokensSalesforce AI Research publica xGen-7B, familia de modelos abiertos entrenados con secuencias nativas de 8K tokens para análisis de código y documentos largos.Leer análisis completo
  16. Salesforce Presenta xGen-MM (BLIP-3): Familia de Modelos Multimodales Abiertos con Datos y Código LibresSalesforce libera xGen-MM (BLIP-3), suite abierta de modelos multimodales con dataset MINT-1T y preentrenamiento intercalado de imagen y texto abierto.Leer análisis completo
Desliza para descubrir las 16 lecturas.16 artículos relacionados