Zaznacz stronę
Indeks wrażliwości formatowania w benchmarkach LLM

Indeks wrażliwości formatowania w benchmarkach LLM

Badacze odkryli, że różne formaty promptów mogą drastycznie zmieniać wyniki modeli językowych, wprowadzając dwa nowe metryki FSI i PSI do pomiaru tej wrażliwości. Analiza 140 000 generacji pokazała ponad 30-krotne różnice między modelami.
Kiedy osobowość agentów AI wpływa na wyniki zespołów LLM?

Kiedy osobowość agentów AI wpływa na wyniki zespołów LLM?

Badacze sprawdzili, czy nadawanie cech osobowości agentom LLM (jak ugodowość) wpływa na ich skuteczność w zadaniach kodowania, współpracy badawczej i negocjacji. Okazuje się, że efekty osobowości zależą silnie od rodzaju wykonywanego zadania.