Comparative analysis of ESG scoring models : evaluating methodologies, data sources and their impact on the ESG scores

Abstract

There is an ongoing debate about the ESG rating agencies and the causes of their rating divergence. The aim of this study is to investigate the divergence and comparability among the ESG rating agencies’ ratings and their methodologies. The research is based on the systematic comparative analysis of the ESG rating agencies that are operating in the financial market. The research gives insight on the issue regarding the divergence of ESG ratings by investigating what their measure. The study explores rating variation and summarizes the differentiating factors among the agencies.

Five different ESG rating agencies are selected for the study. The analysis is conducted for sample of 205 companies that are rated by the selected ESG rating agencies. To compare how well the ratings agree with each other the ordinal correlation and illustration of shares of overlaps are presented. The focus is on the pairwise comparison of relative top 25 % and bottom 25 % companies.

The results of the study show that ESG rating agencies differ in terms of their objective, data sources, rating scale, number of indicators, definition of materiality and weight. The histogram results illustrated that there is a significant variation among the ratings based on the ESG scores. ESG performance varies from relative worst to relative best depending on the ESG rating agency. The correlation analysis supports the previous findings as the results indicate a weak association between the ESG scores.

Parhaillaan käydään keskustelua ESG-luokituslaitoksista ja niiden luokituserojen syistä. Tutkimuksen tavoitteena on tutkia ESG-luokituslaitosten luokituksen ja niiden menetelmien eroja ja vertailukelpoisuutta. Tutkimus perustuu finanssimarkkinoilla toimivien ESG-luokituslaitosten systemaattiseen vertailevaan analyysiin. Tutkimus antaa ymmärryksen ESG-luokitusten eroavaisuuksista tutkimalla, mitä ne mittaavat. Tutkimuksessa tarkastellaan ESG-luokituksen vaihtelua ja kootaan yhteenveto luokituslaitosten välisistä erottavista tekijöistä.

Tutkimukseen valitaan viisi erilaista ESG-luokituslaitosta. Analyysi toteutetaan 205 yrityksen otokselle, jotka ovat luokiteltu valittujen ESG-luokituslaitosten toimesta. ESG-pisteiden välistä vaihtelua tutkitaan visualisoimalla päällekkäisyyksien osuudet ESG-luokittelijoiden välillä. ESG-pisteiden välistä korrelaatiota tutkitaan järjestyskorrelaation avulla. Painopiste on suhteellinen ylimmän 25 % ja alimman 25 % yritysten parittaisessa vertailussa.

Tutkimuksen tulokset osoittavat, että ESG-luottoluokittelijat eroavat toisistaan tavoitteensa, tietolähteiden, luokitusasteikon, indikaattorien lukumäärän ja olennaisuuden ja painoarvon suhteen. Histogrammien tulokset osoittavat, että ESG-pisteiden välillä on merkittävää vaihtelua. ESG-suorituskyky vaihtelee suhteellisen huonosta suhteellisen parhaaseen riippuen ESG-luokituslaitoksesta. Järjestyskorrelaatioanalyysi tukee aiempia havaintoja, sillä tulokset osoittavat, että ESG pisteiden välillä on heikko yhteys.