美國教育考試服務中心(ETS),即GRE考試的管理人員,在它的的網站上發(fā)布了一款工具同時還向各商學院推廣,表示這個工具能按照GRE分數預測GMAT分數。
該工具使用三個線性回歸模型來預測GMAT總分、GMAT定量推理題和GMAT文本邏輯推理題的分數,并聲稱“與實際GMAT總分相比,預測的分數誤差范圍在50分上下浮動,文本邏輯和定量推題分數則存在6分左右的誤差。”
但這個工具在其研究方案設計與解析方面有幾個關鍵的缺陷。對考生和商學院來說,這個工具毫無依據,并且還會造成反效果!以下是對其存在的問題的具體描述。
這些數據樣本已不具備時效性了,并且其真實性也有待考證。今天更加全球化的GMAT考生群體與十年前相比,已經截然不同,并且GMAT定量推理和文本邏輯部分的分值也出現(xiàn)了顯著的變化,所以這些過時的數據并不能反映現(xiàn)實情況。所有的成績數據都是參與者自己報告的,沒有提供可確認數據真實性的證據,ETS也公開承認過這個問題。
該工具的抽樣也有不少問題。ETS遺漏了關于抽樣案例的特征信息,以及 GRE和GMAT分數分布的基本描述性統(tǒng)計信息(如,平均值、標準差、偏度和峰度等)的描述,這些關鍵信息的遺漏是一種極不尋常的情況,這表明ETS并不確定這些樣本數據具有代表性。
事實上有證據表明這個過程使用了不具代表性的樣本。ETS無意中透露了他們在計算預測錯誤的公式中發(fā)現(xiàn)的GMAT分數的標準差(SD),以及他們在開發(fā)預測模型中使用的GMAT總分數標準差(SD=136.8)與2018-2020年的實際GMAT考生人群(SD=114.7)有顯著差異。 |