你有沒有好奇過美國注冊管理會計師(CMA)試題目是如何出爐的?美國管理會計師協(xié)會(IMA)高級副總裁Dennis Whitney給了我們答案。
  考試大綱是絕對的參照系
  與其他考試類似,CMA 考試也有一套完整的出題參照系,那就是“內(nèi)容說明大綱”(CSO)。
  不論出題專家是誰,他們具備怎樣的專業(yè)背景,他們對題目的設(shè)計和評審都必須要遵從CSO。
  Dennis 介紹說,CSO 由包括美國管理會計師協(xié)會認(rèn)證部門(ICMA)董事會在內(nèi)的主題專家團(tuán)隊(duì)(SME),運(yùn)用各種分析研究以及其他相關(guān)調(diào)查的結(jié)果來創(chuàng)建。CSO 對考試出題以及每個領(lǐng)域題目數(shù)量給予指導(dǎo)。一個領(lǐng)域就是一個主要主題范圍,如計劃和預(yù)算或成本管理等。該董事會還會制定考試藍(lán)圖,具體說明不同認(rèn)知水平的題目數(shù)量。他們將考試題目的認(rèn)知水
  平分為A 級、B級或C級。A級是最基礎(chǔ)的水平,要求結(jié)合實(shí)際識別原則,包括知識和理解技能水平。B 級題目包括測試異常情況下對材料的應(yīng)用以及將信息的各組成部分細(xì)化分析的能力。C 級被認(rèn)為是最“高”或最難的一級,題目需要應(yīng)試者對信息進(jìn)行評估和綜合,而且通常要給出建議。此外,在董事會的幫助下,ICMA 員工還準(zhǔn)備了一套學(xué)習(xí)成果說明(LOS)。這些說明對CSO進(jìn)行了詳細(xì)闡述,明確規(guī)定了應(yīng)試者需要具備的能力。
  好題目出自兩個“神秘小組”
  任何一項(xiàng)考試的出題小組都似乎有一層神秘的面紗。隨著Dennis 的介紹,讓我們來了解一下CMA 考試出題組的真容。他們分為兩個組:一組是出題專家,他們部分來自IMA 自有員工,都具備高等教育背景且具備CMA,CPA等專業(yè)資格;部分來自學(xué)者和從業(yè)人員。另一組是審題專家,他們由學(xué)者、業(yè)界精英,例如CFO等擔(dān)任。這些專家大多都有實(shí)務(wù)背景,這樣,能夠確保他們對于考題的意見更加貼近實(shí)用性。記者了解到,在目前的出題專家中有華裔人士,但在審題專家中尚未有華人參與。Dennis表示,他希望未來能有更多中國專家參與到CMA 考試題目的出題和審題工作中。對于一個有效而可靠的考試而言,其原材料是一個“好題目”——一個相關(guān)的且主旨明確的問題。CMA考試的題目要表述明確,沒有歧義,這一點(diǎn)非常重要。據(jù)介紹,ICMA 采用一種系統(tǒng)的方法來編寫考試題目,受過訓(xùn)練的專家將題目提交給ICMA員工。每一個題目都要求設(shè)置經(jīng)過深思熟慮后產(chǎn)生的“干擾答案”或錯誤答案,意在全面測試應(yīng)試者運(yùn)用某一概念的能力。當(dāng)受過專門訓(xùn)練的專家們將備選題目提交ICMA 員工后,后者負(fù)責(zé)衡量每一個題目的主題與CSO 及LOS 的關(guān)聯(lián)性,并且還要就題目的書寫風(fēng)格、清楚度、準(zhǔn)確性、拼寫以及難易程度進(jìn)行考量。在ICMA 專業(yè)員工對題目進(jìn)行編輯后,考試審查小組要對題目進(jìn)行審查。這些小組由董事會
  以及考試審查委員會成員組成。通常,會由一個ICMA員工將一套題目發(fā)送給考試審查小組的成員。每一位小組成員獨(dú)自審查了每個題目以后,全體組員會召開會議,對每個題目進(jìn)行集中討論,包括適宜性、措辭、干擾答案的質(zhì)量、認(rèn)知水平以及準(zhǔn)確性、通過這個評估步驟,審查小組成員可以淘汰不適合的題目,或?qū)︻}目進(jìn)行更改,從而提高題目的質(zhì)量。只有通過了審查小組嚴(yán)格審查的題目才可以用于考試。即便如此,它們也只能作為預(yù)測試的題目或不計分題目,以待進(jìn)一步對題目進(jìn)行測試。測試果匯總后會進(jìn)行進(jìn)一步分析,以便了解題目的效果。這個題目是不是太難了,太簡單了或難度適宜?這個題目是否達(dá)到了預(yù)期的測試效果?不能通過這個審查步驟的題目也會被淘汰。
  集體討論設(shè)定通過標(biāo)準(zhǔn)
  除了編寫考試題目,ICMA還要為考試設(shè)置通過標(biāo)準(zhǔn),也就是為體現(xiàn)應(yīng)試者能力所需要的必須回答正確的題目的數(shù)量。CMA 考試是一個嚴(yán)格的、以實(shí)際應(yīng)用為基礎(chǔ)的考試,它還是
  一個水平評價類考試,也就是說它是用于衡量應(yīng)試者的專業(yè)素質(zhì)和能力,換言之,這個考試不能限定分?jǐn)?shù)分布。ICMA 采用了一種公認(rèn)的程序來確定考試合格的分?jǐn)?shù)。這個程序被稱為安高夫修正法,其中包括了ICMA 董事會的集體判斷??荚嚨膬蓚€部分分別設(shè)置了合格分?jǐn)?shù)。當(dāng)董事會成員參與到這些安高夫考試審查會議中時,他們需要參加考試并進(jìn)行評估。評估每個題目時要考慮:如果100 名合格的CMA 應(yīng)試者回答了這個題目,那么多少個人能夠答對呢?當(dāng)每一位與會者完成了這個問題集,全體與會者會進(jìn)行集體討論。為了推進(jìn)這個過程,心理測量師會計算反應(yīng)范圍并和與會人員對這些反應(yīng)進(jìn)行審查。當(dāng)范圍圍繞相同的普遍結(jié)果時(6個與會成員認(rèn)為100 個應(yīng)試者中有60 人答對題目,超過6個成員認(rèn)為55 人答對,3 個成員認(rèn)為有50 人答對),就要展開限制討論,從而確定該題目的難度等級。對于其他一些題目,這個范圍會略寬。例如,對于某個題目,有些與會成員認(rèn)為100 個應(yīng)試者中
  應(yīng)該有75 人答對這個題目,但是其他成員可能覺得只需要40人答對就可以。ICMA 董事會就會進(jìn)行自由討論,每個與會成員都可以對其評定進(jìn)行修改。第二次評定中,難度等級差異通常會收窄。當(dāng)所有題目的難度等級都確定后,這100 個題目的難度等級會被加入,以便生成考試的合格分?jǐn)?shù)。他們采用統(tǒng)計學(xué)的技術(shù)來平衡測試的不同形式,對所有應(yīng)試者都采用相同的通過標(biāo)準(zhǔn)。
  ——內(nèi)容來自中國會計報