Alternatively, the EWE, which weights annotations with inter-annotator correlations, has been proposed and referred to as the gold-standard \(\widetilde{m}\)  [1]}. Both \(m\)  and \(\widetilde{m}\)  based approximation of ground-truth leads to loss of information on subjectivity [2]}.

В качестве альтернативы был предложен метод EWE, который взвешивает аннотации с учетом корреляций между аннотаторами и называется золотым стандартом \(\widetilde{m}\) [1]. Как \(m\), так и \(\widetilde{m}\) основаны на приближении истинного значения и приводят к потере информации о субъективности [2].