KONSTRUKCE TESTŮ A EMPIRICKÉ VÝSLEDKY TESTOVÁNÍ

60 ACC JOURNAL 2021, Volume 27, Issue 3 DOI: 10.15240/ ul/004/2021-3-007 KONSTRUKCE TESTŮ A EMPIRICKÉ VÝSLEDKY TESTOVÁNÍ Hana Romo á Policejní akademie ČR P aze, Fakul a bezpečnos ního managemen u, Ka ed a jazyků, Lho ecká 559/7, 143 00 P aha 4, Česká epublika e-mail: omo [email protected] Abs ak Hodnocení oblas i os ojo ání neboli učení se cizím jazykům má e s o nání s jinými oblas mi zdělá ání speci ické ysy. Jazyko é es o ání je k omě jiného uniká ní ím, že jazyk je nejen obsahem, ale i nás ojem měření. P o po řeby es o ání byla řeši elským ýmem y ořena banka es o ých úloh obsahující s azky položek, ze k e ých lze y oři sub es ech elký poče es ů obsahujících e míny a p o esní lexiku ko espondující s eálnými požada ky kladenými na p aco níky p axi. Byly ses a eny achie emen es y a kon olní es y na základě položko é banky, akže z unkčního hlediska pře ládá hodno ící unkce. Achie emen es y nejsou zaměřeny jen na es o ání úspěšnos i jedno li ých s uden ů, ale aké na úspěšnos yučujících. Z hlediska in e p e ace ýsledků je pozo nos ěno ána achie emen es ům, k e é umožňují součinnos eálných poč ů položek a es o aných s uden ů. Keywo ds Tes cons uc ion; I em bank; I ems; Reliabili y; Dis ac o s; Te ms; Te minology; P ac ice. Ú od V humani ních obo ech se oblas i es o ání, měření a yhodnoco ání ýsledků p áce esponden ů po ýkáme s nap os o zásadním p oblémem, a o jak objek i izo a ýs upní in o mace získané p ocesu es o ání. Vysoká mí a subjek i i y las ní ěm o obo ům a elké množs í da , k e é je nu né yhodno i , edou k implemen aci a aplikaci pos upů, k e é digi alizují získaná da a a dále pak umožňují jejich elek onické yhodnoco ání na základě s a is ických počí ačo ých modelů. Při es o ání je řeba ycháze ze ří základních o ázek: co bude hodnoceno, jak, j. jaké nás oje a způsob „měření“ je řeba z oli , a jakém kon ex u, j. mimo jiné k jakému účelu budou ýsledky es o ání slouži . Jazyko é es y mají nepochybně dlouhou his o ii. Za p ní odbo nou monog a ii k p oblema ice es o ání anglického jazyka bý á po ažo áno Language Tes ing, k e é oce 1961 publiko al R. Lado. Koncem 70. a počá kem 80. le 20. s ole í se začíná oz íje , komunikační přís up k jazyko ému es o ání, k e ý je po ažo án za jeden z ne li nějších endů. Počá ky komunikačního přís upu byly ý azně za íženy negací předchozích p io i , zejména dů azu na eliabili u es ů. Rané komunikační es o ání po ažo alo eliabili u a alidi u es ů, esp. in e p e ace jejich ýsledků, za k ali y, k e é jsou zájemně nega i ně zá islé. Došlo k posunu a eliabili a spolu s alidi ou dnes pa ří k základním las nos em každého jazyko ého es u. K ali a (nejen) jazyko ého es u přímo sou isí s účelem, k němuž je yuži . Na základě účelů es o ání pak můžeme ho oři o ypech es ů. Klasi ikace es ů zásadě ycházejí přede ším ze způsobů in e p e ací skó ů. 61 Věnujeme-li se es o ání odbo ného a akademického jazyka současnos i u nás, jsou inspi a i ní pozna ky a dopo učení, k e é posky ují publikace a semináře ámci p ojek u COMPACT: Kompe ence jazyko ém zdělá ání na Masa yko ě uni e zi ě B ně, k e ý je spolu inanco án E opským sociálním ondem a s á ním ozpoč em České epubliky. 1 Předmě ýzkumu Předmě em našeho ýzkumného zájmu byla yb aná p oblema ika es ů jazyko ých, a o didak ických. Zajímají nás přede ším es y hodno ící s upeň os ojení jazyko ých p os ředků a řečo ých do ednos í. Zaměřujeme se souladu s cílem os ojo ání cizího jazyka na ysoké škole na es o ání odbo né slo ní zásoby, na poslech odbo ných ex ů a jejich č ení s po ozuměním. Součás í řízení pedagogického p ocesu je kon ola a hodnocení ýsledků učebních činnos í s uden ů, a o při espek o ání pedagogických a didak ických p incipů a speci ik s udijního předmě u. „Společný e opský e e enční ámec p o jazyky“ hodnocení ěnuje adek á ní pozo nos . Pod obně jsou yloženy ypy hodnocení, jejich ýhody a limi ace s ohledem na účel hodnocení, a disku o ány o ázky p ak ičnos i či p o edi elnos i při hodnocení. Samos a nou čás oří es o ání jako jedna z o em hodnocení ýsledků cizojazyčného zdělá ání [3]. Na azující publikace pod záš i ou Rady E opy dále p oblema iku es o ání oz íjejí. Předmě em našeho ýzkumného zájmu byla yb aná p oblema ika es ů jazyko ých, a o didak ických. Zajímají nás přede ším es y hodno ící s upeň os ojení jazyko ých p os ředků a řečo ých do ednos í. Zaměřujeme se souladu s cílem os ojo ání cizího jazyka na ysoké škole na es o ání odbo né slo ní zásoby, na poslech odbo ných ex ů a jejich č ení s po ozuměním. Čás ýmu – s odbo nos í anglický jazyk – pos upně zp aco á ala zejména p oblema iku o by položko é banky (ITEM BANK), ealizo ala pilo ní ázi zp aco aných es ů a in e p e aci získaných da z empi ického še ření. D uhá čás ýmu – s odbo nos í německý jazyk – y ářela odbo né ma e iály, ozp aco á ala je didak icky a ořila k nim es y s klíčem [2]. 2 Položko á banka, položky, s azky položek, úložiš ě es o ých položek V ná aznos i na ozbo sku ečných po řeb es o ání byly přede ším p o položko ou banku p o anglický jazyk yp aco ány zásady jejího y áření, kons uk u a speci ikací es ů a jejich obsaho é náplně ycházející z učebnic dopo učených p o s udium. Položko á banka, e minologicky éž nazý aná banka es o ých úloh (BTÚ) nebo banka es o ých položek (BTP), anglicky I em Bank, našem poje í ope uje s jedno li ými komple ními s azky položek, k e é jsou ýsledkem p omyšleného ses a o ání ů cem es u, nikoli náhodného gene o ání počí ačem či náhodného ýbě u ů cem es u ze sumy položek. Vzhledem k našim echnickým možnos em y áříme u o banku e smyslu úložiš ě es o ých položek, nikoli e smyslu celého in o mačního sys ému se šemi p ocesy až po ygene o ání es u počí ačem. T o ba k ali ních es o ých položek je didak icky a časo ě elmi ná očná činnos , na níž se podmínkách jazyko é ka ed y podílí es o ací ým yučujících, k eří op o i p o esionálním es o acím p aco iš ím implemen ují šechny unkce p ocesu o by es ů, zn. ů ců es ů, mode á o ů, adminis á o ů a es e ů. 62 2.1 S uk u a položko é banky, s azky položek Na základě pos upného y áření položko é banky lze následně pomocí ůzných kombinací jedno li ých sub es ech y oři pomě ně elký poče ůzných es ů se s ejnou speci ikací a kons ukcí. Vy oření k ali ních a eliabilních es ů zá isí na om, zda položky sku ečně měří o, co au oři zamýšlejí měři , zda jsou eliabilní ( zn. zda posky ují s ejné ýsledky za s ejných podmínek při opako aném zadá ání) a zda jsou objek i ní. Vzhledem k požada ku jazyko ých didak ických es ů pok ý a o nomě ně celý es o aný úsek uči a jsme se ozhodli y áře již zmíněné s azky položek. Jedno li é s azky položek obsahují s ejný poče položek (dese položek, poslech a č ení s po ozuměním pě položek) s ejného ypu a o my podle s ano eného pa adigma u, kons ukce a speci ikace. Každá položka e s azku je ypo ě mul iple choice se č yřmi dis ak o y a sp á ná je ždy jen jedna možnos . Na ú o ni B1, B1+, B2– ne olíme možnos „není u edeno“, ani zře elně nesp á né nebo neexis ující s uk u y (zejména lexikálně- g ama ické čás i). Každý s azek má s oji speci ikaci, in o maci o ý oji a las nos ech položek, řekněme jakýsi s ůj „ odný lis “. 2.2 Příklad speci ikace  éma (aby nedocházelo k dublo ání éma ámci jednoho es u)  au o daného s azku položek  mode á o (odbo ník daném jazyku, něk e ých případech odbo ník z dané oblas i konzul ující obsaho ou přesnos es o aných e mínů)  ob ížnos (předpokládané uži í jazyko ých p os ředků minimálně na ú o ni B1 podle SERR („Společného e opského ámce p o jazyky“), odbo ná e minologie přesahuje do ú o ně B2)  da um ložení ( yb ané s azky/položky by se neměly použí p o zadání do op a ných es ů ani následujícím akademickém oce)  s a us položky (např. ak i ní, e k e ém es u, kdy a kým byla yuži a; s azky/položky po delší dobu neak i ní yřadi nebo z ekons uo a )  eliabili a ( yjádřena koe icien em s hodno ami od 0 do 1, zá islá na poč u položek p, mediánu m a ozp ylu s2 a ypočí aná podle zo ce = m (p - m) / ps2, přičemž očeká aná spolehli os je = 0,6 a yšší. Položky s nízkou eliabili ou je nu no přep aco a . Dále je řeba přep aco a elmi snadné (splněné 85 % a íce es o aných) a elmi ob ížné položky (splněné pouze 25 % a méně es o aných.)  sp á ná odpo ěď (za ma ěná odpo ěď čás i odpo ěďníku sub es u Řešení) Důleži á je úloha mode á o a či mode á o ů, jejichž úkolem je mimo jiné k i icky e ido a položky, aby se yloučila analogie mezi nimi a aby byly položky kohe en ní a neodchylo aly se od požada ků kladených na danou jazyko ou ú o eň. Vzhledem k pomě ně elkému objemu slo ní zásoby, k e á má bý es o ána, je žádoucí, aby selekce e mínů a p o esní lexiky p o úlohy byla elmi pečli á a ko espondo ala s eálnými požada ky kladenými na p aco níky p axi. T o ba položek e s azcích ychází z klasického es o ání, kdy o ázkami pok ý áme celý ozsah předpokládané ú o ně znalos í. 63 3 Základní zásady o by a použi í dis ak o ů T ů ce es u by se měl y a o a nesp á ného použi í dis ak o ů, o znamená, že by neměl uží a neexis ující a y, absu dní či banální odpo ědi, chy áky, ne eálný obsah či působi suges i ně. Účelem es u je uchopi lexiku a g ama ické p os ředky jako nás oj komunikace a pochopení ni řních i nějších sou islos í, nikoli jako samoúčelný nás oj p o ěřo ání znalos í jedno li ých slo íček či g ama ických je ů. Pla í obecné p a idlo, že es p o ěřuje eálně exis ující cizí jazyk a ne o, zda je s uden schopen ozliši , k e é slo o nebo a exis uje a k e é nikoli . Položky by měly bý o mulo ány ak, aby s uden i neměli při yplňo ání es u možnos ak izo a . Tak izo áním myslíme si uaci, kdy odpo ědi, zejména g ama ické čás i obsahují nezamýšlené na ážky či nápo ědy, k e é bys ým s uden ům pomohou z oli sp á nou odpo ěď, aniž by ji měli podloženou pa řičnou znalos í. Zařazujeme-li es o ání z . so skills, máme jazyko ém es o ání na mysli p o ěření do ednos i použí a za edený úzus e společenských a p aco ních si uacích, jejichž neznalos by mohla és k nepo ozumění nebo komunikačním nepříjemnos em. Jako příklad lze u és následující o ázky: 1. Jak bys e eago ali na žádos ašeho anglického ins uk o a? Will you s ay he e o e ime his a e noon, please? a) No, I’m busy. b) Oh, I’m so y, bu I mus lea e now. c) No, I won’ . d) Oh, no, again? sp á ná odpo ěď b) 2. Odpo ěz e zd ořile na následující sdělení: May I in oduce you o se gean Diane B own? He husband is you ins uc o . a) Nice o mee you, M s. b) Nice o mee you, lady. c) Nice o mee you, M s B own. d) Nice o mee you, Miss B own. sp á ná odpo ěď c) 3.1 D uhy a o my položek: uza řené položky, mul iple choice ques ions, s em, dis ak o y P o účel é o banky y áříme uza řené položky o má u úloh s ýbě em odpo ědí (Mul iple Choice Ques ions, MCQ) se č yřmi dis ak o y (sp á ná 1 možnos ). O ázkou (ques ion) je míněno jakékoli zadání es o é položce. Nejčas ějším ypem úloh s MCQ jsou podobných es ech uží ány 2–4 dis ak o y. Naší olbou jsou 4 dis ak o y, p o ože dos a ečně pok yjí možnos i ýbě u, g a ické zp aco ání je kompak ní a po izuální s ánce působí přehledně a přá elsky ůči es o aným. Položka je ořena z kmene (s emu), k e ým je o ázka, neúplné zení nebo úloha (např. Odpo ěz e zd ořile na následující sdělení. Následuje ýbě 4 možnos í, z nichž 1 yho uje společenskému úzu.). S emy jsou o mulo ány ak, aby byly jasné, s učné a aby u áděly šechny [pouze] ele an ní údaje. Jsou ob ykle delší než dis ak o y a slo a, k e á by se opako ala dis ak o ech, zp a idla u ádíme e s emu. Každá položka by měla es o a pouze jednu oblas , aby nedocházelo k omu, že by z olená položka, i když sk y ě, měla d a ýznamy. S ejně ak musíme dbá na jednoznačnos položky. Například: 64 She s opped …………….. he suspec . a ou o’clock. a) in e oga e b) o in e oga e c) in e oga ion d) in e oga ing 1. Možnos : b) Zas a ila se, aby yslechla podezřelého. 2. Možnos : d) Skončila s ýslechem podezřelého. Aby položka byla jednoznačná řeba e smyslu d), up a íme s em doplněním ele an ní in o mace: She s opped ……………. he suspec because he had a solid alibi. Dbáme na o, aby dis ak o y byly s učné, jednoznačné, přibližně s ejně dlouhé a s ejně a ak i ní či unkční. Dis ak o , k e ý je zje ně nesp á ný nebo není kohe en ní s es o aným uči em, nemá p o es o ání smysl a po mode aci položek je nah azo án. Pokud jsou ů ci es ů uči elé příslušného cizího jazyka, znají z p axe ypické chyby s uden ů a je uži ečné je zah no a do položek. 3.2 Sh nu í dopo učení k o bě položek a dis ak o ů 1. Každá es o aná položka ko esponduje se zdělá acím cílem a uči em p obí aným ku zu. 2. Výbě odpo ědí má jednu p okaza elně sp á nou odpo ěď. 3. V každé položce es ujeme jeden jazyko ý p os ředek, případě do ednos í jednu in o maci. 4. Při ýbě u es o é položky zohledňujeme p ak ičnos es o aného. 5. Dis ak o y jsou ele an ní možnos i odpo ědi i jiných kon ex ech. 6. Dis ak o y zah nují čas o se opakující chyby s uden ů. 7. Měníme náhodně pozici dis ak o ů mezi a ian ami a, b, c, d. 8. Délka nabízených možnos í je přibližně s ejná. 9. Dis ak o y jsou samy o sobě možné, neodpo ídají šak zadání. 10. Dis ak o y, k e é si nikdo ne ybí á, nah aďme. 3.3 Sh nu í dopo učení k o mě a p ocesu o by položek a dis ak o ů 1. Použí ejme o má sp á ná odpo ěď a nejlepší odpo ěď. Tu o sku ečnos u eďme zadání. 2. Vyh aďme si dos a ečný čas na příp a u a mode aci položek a dis ak o ů íce o uči eli. 3. Délka zadání položky by měla bý přibližně s ejná. 4. S řídejme p a idelně sp á né odpo ědi mezi pozicemi a, b, c, d. 5. Pokud zadání položky obsahuje meze u, umís ěme ji ke konci zadání položky. 6. Použí áme-li nega i ní možnos i, zdů azněme zápo , např. NOT. 7. Hla ní in o mace položky se nachází zadání. 8. In o mace p o u čení sp á né odpo ědi je zadání, ne es ujeme šeobecnou znalos . 9. Nepouží ejme špa né nebo neexis ující g ama ické s uk u y. 10. Položky es u jsou na sobě nezá islé, sp á ná odpo ěď na jednu položku neo li ní další položky. 65 Poznámky: Ad 1. Důleži os a ob ížnos es o aného uči a (základní ek en o ané je y ú o ně B1 – B2) Ad 2. U čení poč u a d uhu položek (uza řené mul iple choice a T ue/False – po 1 s azku poslechu a č ení s po ozuměním) Ad 3. Vy oření s azku, příp a a nah á ek, ko ek u a, speci ikace, přiřazení bodo ých hodno , řešení Ad 4. S ano ení časo é do ace na s azek (poslecho á c ičení se přeh á ají 3x) Ad 5. Analýza s azků položek (s a is ické měření – p ůmě ný skó , ob ížnos , eliabili a) a in e p e ace ýsledků Ad 6. Mode ace dis ak o ů položkách a ekons ukce s azku Při p ak ické ealizaci o by položko é banky byly řeši elským ýmem empi icky iden i iko ány p oblema ické oblas i, ke k e ým je nu no přihlíže při koncipo ání mul iple- choice es u a ýbě u hodnos i jejich použi í: 1. Typo ě je en o d uh es ů nee ek i ní p o řešení p oblémo ě-o ien o aných o ázek yžadujících schopnos o ganizace a yjadřo ání myšlenek. 2. V eálných jazyko ých si uacích esponden i nemají možnos ybí a sp á nou odpo ěď z předem dané nabídky. 3. Tes y ykazují menší p os o p o zpě nou azbu esponden ů, p o ože není zaznamenán p oces, jakým se esponden dop aco al k olbě chybné odpo ědi. 4. Tes y nejsou hodné p o es o ání p oduk i ních jazyko ých do ednos í. 5. Tes y mají elkou ná očnos na examiná o y při ses a o ání k ali ních položek a dis ak o ů a z oho plynoucí časo á ná očnos ses a o ání a mode o ání es ů. 6. Umožňuje náhodný ýbě sp á né odpo ědi esponden em. 4 Kons uo ání es u na základě položko é banky Vzhledem k omu, že e minologie klasi ikace es ů není zcela jedno ná, ymezujeme si p o naše po řeby jejich dělení ak o: 4.1 Tes p ůběžný („Achie emen Tes “) Ten o es aplikujeme na ýuce, objek i ní es o é položky s ícenásobnou olbou odpo ědí, z nichž pouze jedna je sp á ná, jsou o ien o ány na uči o daného semes u. Tes ujeme, co se s uden /s uden ka sku ečně naučili, e s o nání s ím, čemu se podle sylabu a s udijních ma e iálů nauči měli. 4.2 Tes kon olní („P og ess Tes “) Ten o nes anda dizo aný es aplikujeme e zkouško ém období d uhého semes u, zjišťujeme, do jaké mí y s uden /s uden ka p obí aná odbo ná éma a z ládli. Úspěšný/á s uden /s uden ka (70% sp á ných odpo ědí) za něj získá ají zápoče . 4.3 Tes zá ě ečný („P o iciency Tes “) Ten o nes anda dizo aný es je součás í zkoušky. Z hlediska uči a má p ůřezo ý cha ak e a zjišťuje, co s uden /ka sku ečně pří omné době znají a jak se oz inuly jejich ecep i ní řečo é do ednos i. 66  Fo my úloh: mul iple choice ques ions (3 dis ak o y – 1 sp á ná odpo ěď, za nesp á nou odpo ěď se body nes há ají)  Každá položka es uje pouze jednu oblas , aby nedocházelo k omu, že by z olená položka, i když sk y ě, měla d a ýznamy 5 Cílo é skupiny, analýza uči a Cílo ou skupinou jsou s uden i 1. a 2. očníku kombino ané a p ezenční o my bakalářského s udia p og amů bezpečnos ně p á ního a bezpečnos ního managemen u. Každý z p og amů má zadaný dopo učený s udijní ma e iál, ze k e ého ů ci es ů yb ali na základě analýzy uči a pods a né je y nezby né p o z ládnu í p o esní e minologie a řečo ých do ednos í na ú o ni B1 SERR p o jazyky (Th eshold). Nu no doda , že při es o ání p o esní slo ní zásoby je požado aná ú o eň yšší – B1+ až B2. Ak uálně použí ané ýuko é ma e iály yuží ají nejp a děpodobnější éma a a si uace, k e é se mohou ysky nou při ykoná ání policejních činnos í a p áce oblas i eřejné sp á y. Obsahují lexiku, k e ou lze podle kon ex u obecně zařadi do ok uhů u edených jedno li ých éma ech položko é banky, jimiž jsou subbanky SECURITY AND LAW a PUBLIC ADMINISTRATION. V každé a ian ě es u y ořeného na základě dané banky by měla bý y áženě zas oupena základní a ypická slo ní zásoba z ak uálně es o aných éma a g ama ické je y odpo ídající ak uálně požado anému s upni znalos í. Na základě položko é banky jsme ses a ili es y p ůběžné ( ypu „achie emen “) a kon olní, ak aby yho o aly zamýšlenému ýs upu, aby měřily, co změři mají a aby z unkčního hlediska pře ažo ala unkce diagnos ická. V případě p ůběžných es ů můžeme změři nejen úspěšnos jedno li ých s uden ů, ale éž i úspěšnos pedagoga, zn., jak s uden y mo i o al, kolik oho s uden y naučil a ( našem případě) jak dobře es kons uo al jako jeho au o . S yuži ím banky es o ých položek byly yp aco ány d a d uhy es ů:  suma i ní – poly ema ický, použi ý jako es u zkoušky B 71 po 4 semes ech s udia a byl součás í hodnocení s uden a,  p ůběžné – mono nebo poly ema ické, 1. a 3. semes u kombino ané a p ezenční o my bakalářského s udia p og amů bezpečnos ně p á ního a bezpečnos ního managemen u; y o es y byly ýchozím ma e iálem p o počí ačo é yhodnocení. Slouží k hodnocení p ůběhu ýuky, neslouží k hodnocení es an ů. Z hlediska in e p e ace ýsledků se následující čás i zabý áme es y pouze p ůběžnými, p o ože můžeme om o případě p aco a s ele an ním množs ím položek a p obandů. 6 Požada ky a cíle es o ání, základní me odická p a idla Základními požada ky kladenými obecně na y o p ůběžné es y jako na způsob měření jazyko ých do ednos í s uden ů [1] jsou přede ším:  objek i i a (didak ický es do ednos í, k e é yžadují od s uden ů řeši s ejná zadání za s ejných podmínek a s ejné časo é do ace a k e é jsou yhodnoco ány počí ačo ým p og amem nezá isle na osobě hodno i ele);  eliabili a (homogennos a ep oduko a elnos )  alidi a (zda es měří, co po řebujeme nebo chceme změři – u jazyko ých es ů jde zejména o po ozumění poslechu či ex u, pochopení i složi ějších g ama ických s uk u )  a iabili a 67 Při ý oji es ů i jejich jedno li ých úloh a yp aco ání zadání jsou dod žo ána základní me odická p a idla:  me odická, didak ická a obsaho á s ánka es u musí bý ele an ní ůči zadání a účelu es u (s uden i jsou již na začá ku ku zu in o mo áni o obsaho é náplni es u, jeho o mě, ozsahu pok ý ajícím učební lá ku, ypu úloh, časo é do aci, způsobu yhodnocení, sdělení ýsledků a zpě né azbě)  ýs a ba/kons uk es u je alidní a eliabilní ( ychází ze speci ikace položek);  pa ame y zadání splňují požada ky na mí u úspěšnos i es u [5] 7 Fo ma es ů, z olený d uh es ů, ypy es ů Z p ak ických dů odů, zejména z dů odů inančních ná oků na echnické yba ení, p acujeme p o po řeby es o ání s kombinací PBT (papí o ě yplňo aných es ů – pape - based es ing) a CBT (počí ačo ě yplňo aných es ů – compu e -based- es ing) [4] s následující cha ak e is ikou:  PBT es s úlohami yb anými es e em z položko é banky  záznamo ý lis – odpo ěďník p o zaznamenání odpo ědí  oskeno ání, měření a yhodnocení odpo ědí počí ačem Týmo á spolup áce založená na sdílení zkušenos í při y áření položek a úloh p o banku říbí jejich k ali u a na íc přináší jis ou nadhodno u dů ě y s uden ů e sp a edli ou a objek i ní e aluaci spíše než při konku enčním přís upu jedno li ých es e ů. Pos upným y ářením položko é banky lze následně pomocí ůzných kombinací jedno li ých sub es ech y oři pomě ně elký poče ůzných es ů se s ejnou speci ikací a kons uk em. Podle s upně důkladnos i příp a y a o ěřo ání es u a jeho yba enos i je en o p ůběžný es na ozh aní s anda dizo aného a nes anda dizo aného es u. Tako ý es je něk e ými au o y (např. Hamble on, Eigno , Ro inelli, 1986) označo án jako k azis anda dizo aný, p o ože sice obsahuje s anda dy p o hodnocení ýsledků, ale jeho s anda dizace není úplná [8]. Na íc úplná s anda dizace je p ojek časo ě i inančně ná očný, a p o o našich podmínkách yho uje en o „k azis anda dizo aný“ es , jenž o ěřuje ú o eň ědomos í s uden ů několika pa alelních skupinách na jedné škole, k e é se na es přip a o ali e s o na elných podmínkách ze s ejných dopo učených ýuko ých ma e iálů. Za s o na elných podmínek je es implemen o án a aké e aluo án. P ůběžné es y byly ypo ě koncipo ány jako achie emen es e s éře odbo ného jazyka i g ama ice. Achie emen es ( es jazyko ých schopnos í) je ořený úlohami s ýbě em odpo ědí (Mul iple Choice Tes ) a T ue/False a je na žen ak, aby měřil ozsah u či ých ak uálních jazyko ých schopnos í s uden a [6]. 7.1 Sub es y, áze příp a y es u P ůběžný es má ři sub es y – poslech s po ozuměním (10 položek), č ení s po ozuměním (10 položek) a lexikálně-g ama ický (60 položek). Sub es y poslech a č ení s po ozuměním se skládají každý ze d ou s azků, z nichž každý obsahuje 5 položek ypu ue/ alse a 5 položek mul iple choice, a sub es lexikálně-g ama ický zah nuje 6 s azků o 10 položkách. 4 s azky lexikálního sub es u se zaměřují na doplňo ání hodných slo do zájemně nesou isejících ě , doplňo ání hodných slo do sou islého ex u, přiřazení sp á ného e mínu k dané de inici a ýbě u sp á ného překladu ý azu z Č do 68 A nebo ob áceně. G ama ický sub es se skládá z jednoho s azku doplňo ání sp á ných g ama ických a ů do ě a z jednoho s azku položek es ujících ýbě sp á né předložky (zejména azebných nebo u nej ek en o anějších ázo ých slo es). Poslecho á čás oří 10 % es u, p o ože je zohledněna sku ečnos , že s uden i kombino aného s udia mají omezenou možnos řízeného nác iku poslecho ých do ednos í a yšší bodo á do ace poslechu by mohla znehodno i celko é bodo é hodnocení. Do ednos i č ení s po ozuměním bylo éž přisouzeno 10 %, a o z oho dů odu, že i g ama icko-lexikálních es o ých c ičeních jsou kon ex o é úlohy yžadující z ládnu í é o do ednos i. Přes o na základě analýzy sub es u č ení s po ozuměním p ůběžných es ech ( iz čás zp á y ýkající se é o p oblema iky) bude p a děpodobně áha oho o sub es u přehodnocena. Vzhledem k pomě ně elkému objemu slo ní zásoby, k e á má bý es o ána, je žádoucí, aby selekce e mínů a p o esní lexiky p o úlohy byla elmi pečli á a ko espondo ala s eálnými požada ky kladenými na policis y a p aco níky eřejné sp á y p axi. S anda dizace es ů a y oření položko é banky e ek i ně napomáhá lexibilnímu y áření eliabilních a alidních es ů díky elek onickému o má u, k e ý umožňuje p ůběžnou ak ualizaci a doda ečné úp a y. V p ocesu o by es ů je nezby né p os řednic ím mode á o a dbá na analýzu po řeb a zpě nou azbu es an ů, es e ů a ů ců es o ých úloh, k e á ede k e en uálním e izím. Pe sonální zázemí es o ání nemůže bý záleži os í jednoho člo ěka – o by es ů se našich podmínkách účas ní nejen ů ci es ů, ale aké mode á oři, adminis á oři a hodno i elé, jimiž jsou yučující ka ed y jazyků. Mode á o y mohou bý éž přiz aní kolego é ze zain e eso aných ka ede p o posouzení odbo né e minologie. Při y áření položek p o šechny jazyko é ú o ně A2 – C1 by měli mí ů ci ždy na zře eli es o ání do ednos í po ozumění ex u a poslechu s po ozuměním, přičemž na yšších ú o ních by g ama ické je y měly bý es o ány z hlediska jejich li u na sp á nos obsahu sdělení. 8 Jakou p ocen uální úspěšnos ykazují s uden i obou p og amů kombino ané i p ezenční o my p ůběžném es u? P ocen uální úspěšnos je jedno ze základních k i é ií, k e é použí áme p o hodnocení ýsledků es o ých ýs upů esponden ů. V ámci d uhé o ázky VÚ se blíže zabý áme po o náním p ocen uálního hodnocení úspěšnos i pilo ní sady es o aných skupin a dále in e p e ujeme naměřená da a. Základní přehledo á abulka s p ocen uálním hodnocením suma izuje ýs upy p o edené na pilo ním zo ku pě i es ů u s uden ů p ezenčního a kombino aného s udia obou s udijních p og amů. Výsledný da o ý ýs up je p ůřezo ým zo kem es ů adminis o aných ždy na zá ě jednoho ze semes ů č yřsemes o ého jazyko ého ku zu. Tabulka 1 suma izuje ýs upy zá ě ečných es ů.