Play project
Investigating the Relationship Between Priming with Multiple Traits and Language Model Truthfulness in GPT-3's itch.io pageResults
Criteria | Rank | Score* | Raw Score |
Significancia | #1 | 4.000 | 4.000 |
Validez Técnica | #1 | 5.000 | 5.000 |
Overall | #1 | 4.125 | 4.125 |
Novedad | #2 | 3.500 | 3.500 |
Claridad | #2 | 4.000 | 4.000 |
Ranked from 2 ratings. Score is adjusted from raw score by the median number of ratings per game in the jam.
Judge feedback
Judge feedback is anonymous.
- - El artículo es directamente aplicable a la alineación de modelos de lenguaje mediante prompt engineering, y es informativo sobre la capacidad de estos modelos de perseguir objetivos opuestos al mismo tiempo. - El estudio extiende de manera novedosa los resultados obtenidos previamente - El artículo está bien escrito y resulta fácil de leer - Proporcionar un repositorio con el código y los datos obtenidos facilita la reproducción de los resultados. # Evaluación - Significancia: Los resultados pueden aplicarse directamente al alineamiento de modelos de lenguaje mediante prompt engineering. Sin embargo, es cierto que hoy en día se suelen utilizar técnicas de alineamiento más avanzadas (como RLHF) 3/5 - Validez técnica: No aprecio ningún error en la metodología ni en el código 5/5 - Claridad: El artículo es fácil de comprender y los resultados están presentados en un gráfico y una tabla. Habría apreciado más visualizaciones de los resultados según el tipo de adjetivo añadido 4/5 - Novedad: Se trata de una extensión incremental de resultados previos, usando también los métodos y el código desarrollado previamente 3/5
Nombre del equipo
Honesty Hobbits
Autores
Monserrat Benavides, Mateo León
Leave a comment
Log in with itch.io to leave a comment.
Comments
No one has posted a comment yet