Ethical Evaluation and Improvements.
We evaluate GLM-130B on a wide range of ethical evaluation benchmarks, including bias measurement [1]}, [2]}, hate speech detection [3]}, and toxic generation estimation [4]}.
Notwithstanding their deficiency [5]}, [6]}, these datasets serve as a meaningful and initial step towards an open quantitative evaluation of LLMs.

Этическая оценка и улучшения.

Мы оцениваем GLM-130B по широкому спектру этических показателей, включая измерение предвзятости[1], [2], обнаружение ненавистной речи[3] и оценку генерации токсичного контента[4].

Несмотря на их недостатки[5], [6], эти наборы данных служат значимым и первым шагом к открытой количественной оценке LLM.