Indie game storeFree gamesFun gamesHorror games
Game developmentAssetsComics
SalesBundles
Jobs
Tags
A jam submission

Investigating the Relationship Between Priming with Multiple Traits and Language Model Truthfulness in GPT-3View project page

Winning entry. Research for Thinkaton Inteligencia Artificial UC
Submitted by Mateo León, mon-b — 3 hours, 14 minutes before the deadline
Add to collection

Play project

Investigating the Relationship Between Priming with Multiple Traits and Language Model Truthfulness in GPT-3's itch.io page

Results

CriteriaRankScore*Raw Score
Significancia#14.0004.000
Validez Técnica#15.0005.000
Overall#14.1254.125
Novedad#23.5003.500
Claridad#24.0004.000

Ranked from 2 ratings. Score is adjusted from raw score by the median number of ratings per game in the jam.

Judge feedback

Judge feedback is anonymous.

  • - El artículo es directamente aplicable a la alineación de modelos de lenguaje mediante prompt engineering, y es informativo sobre la capacidad de estos modelos de perseguir objetivos opuestos al mismo tiempo. - El estudio extiende de manera novedosa los resultados obtenidos previamente - El artículo está bien escrito y resulta fácil de leer - Proporcionar un repositorio con el código y los datos obtenidos facilita la reproducción de los resultados. # Evaluación - Significancia: Los resultados pueden aplicarse directamente al alineamiento de modelos de lenguaje mediante prompt engineering. Sin embargo, es cierto que hoy en día se suelen utilizar técnicas de alineamiento más avanzadas (como RLHF) 3/5 - Validez técnica: No aprecio ningún error en la metodología ni en el código 5/5 - Claridad: El artículo es fácil de comprender y los resultados están presentados en un gráfico y una tabla. Habría apreciado más visualizaciones de los resultados según el tipo de adjetivo añadido 4/5 - Novedad: Se trata de una extensión incremental de resultados previos, usando también los métodos y el código desarrollado previamente 3/5

Nombre del equipo
Honesty Hobbits

Autores
Monserrat Benavides, Mateo León

Leave a comment

Log in with itch.io to leave a comment.

Comments

No one has posted a comment yet