Dar įmesiu ankstesnes mūsų klubo narių mintis apie teisėjavimą.
Reynevan » 2010 Geg 09 (Sek) 0:12 Kadangi jau antrus metus iš eilės susiduriame su teisėjavimo problemomis (neobjektyvumas, kažkodėl kartais laimi blogesni modeliai, sistemos sudėtingumas, ilgas ir dažnai nereikalingas balų skaičiavimas ir galiausiai teisėjų neprofesionalumas bei trūkumas), pagalvojau, kad kitais metais reikėtų ryžtingai paprastinti visą vertinimo sistemą.
Siūlau padaryti tokį variantą: teisėjų komisija nenaudoja lapukų su balais, o dialogo principu visi kartu apžiūri kiekvieną kategorijos modelį, kalbant apie jų kokybę, minusus, pliusus ir pan. ir visi kartu argumentuojant išrenka 5 geriausius modelius - čia pirma vieta, čia antra, čia penkta ir t.t. Jeigu vyksta ginčas, pvz.: vienas teisėjas sako čia turėtų būti antra vieta, kitas - trečia, ir nesusitaria tarpusavyje, yra du variantai. Arba visi teisėjai balsuoja ir laimi balsų persvara, antras variantas: vertinami pagal balų sistema yra 5 teisėjų išrinkti geriausi modeliai.
Kodėl išrinkti reikia 5, o ne 3 geriausius? Todėl, kad vienoje kategorijoje visi trys geriausi gali priklausyti vienam modeliuotojui. Kadangi kategorijoje gali dalyvauti tik 3 vieno dalyvio modeliai, pirmą vietą užims vieno modeliuotojo geriausias modelis, o 2 ir 3-ą - kitų modeliuotojų. Jeigu bus situacija, kad laimi 5 geriausi modeliai padaryti dviejų modeliuotojų, tada tiesiog nebus trečios vietos.
Manau, kad sistema yra pakankamai paprasta ir logiška. Pliusai tokie, kad laimi realiai geriausi modeliai, nereikia ilgai ir nuobodžiai skaičiuoti balų, dingsta neobjektyvumas. Kitas pliusas - galima bus sudaryti vieną didesnę komisiją pvz.: plastikui ir ta pati komisija per porą valandų galės įvertinti visus parodos modelius. Tada dingsta ir teisėjų problema.
Jau ne kartą susidūrėme su Klubo Sparnai 72 konservatyvumu. Ir šį kartą jie gali nesutikti taip teisėjauti. Asmeniškai nematau problemos, jeigu jie vertintų aviacijos modelius taip, kaip jiems tai patinka.
Pasidalinkite prašau savo mintimis, gerbiamieji kolegos.
auktis » 2010 Geg 10 (Pir) 2:05 Daug žinoma jau iečių šita tema buvo sulaužyta, ir, ko gero, dar bus
Mano nuomone, vertinimas skaičiuojant balus, o ne išrenkant geriausius keletui žmonių (teisėjų) susitarus - pakėlė konkursą į daug aukštesnį ir profesionalesnį lygį. Todel organizuojant konkursus ateityje, verta šį lygį išlaikyti ir negrįžti atgal. Kažkur esu minėjęs, kad jei tai yra stendinių modelių konkursas (t.y. geriausių technikos modelių-kopijų varžybos) - taisyklės ir vertinimas turi būti apibrėžta; jei tai yra kaip meno parodoje (vertinimas "man gražu") - tuomet prašom, bet vadinti renginį reiktų kitaip (gražiausio modelio rinkimai, ir t.t. ir pan.).
Pačią vertinimo sistemą tobulinti visada galima ir visada reikia. Problemos, su kuriomis buvo susidurta šio konkurso metu buvo: 1) teisėjų trūkumas ir kategorijų gausa; 2) dalies teisėjų menkas profesionalumas; 3) techniniai nesklandumai spausdinant vertinimo lapus ir skaičiuojant rezultatus; 4) laiko stoka (įtempta dienotvarkė).
Daugumą iš šių problemų yra išsprendžiamos.
Bet pirmiausia dėl pačio konkurso principo - aš vis dar ir vis labiau esu įsitikinęs, kad konkurse turi būti vertinamas vienas to pačio modeliuotojo modelis vienoje kategorijoje (šį kartą buvo registruojami trys į konkursą). Modeliuotojas, pristatydamas savo modelius turi sugebėti pasakyti, kuris iš jų vertintinas (t.y. geriausias), ir neturėtų būti tai papildomai užkraunama teisėjams. Tai, be to papildomai apsunkina skaičiavimus - jei keli to pačio modeliuotojo darbai pretenduoja į prizines vietas, reikia žiūrėti, kas sekantis ir pan. Prieštaraujantys pasakys - dėl renginio sėkmės, įspūdžio žiūrovams, modelių reikia kuo daugiau. Sunku čią ką atsikirsti, tačiau turi būti ir avis sveika, ir vilkas sotus (kitaip tariant ir dalyviai, ir teisėjai, ir žiūrovai patenkinti). Vis dėlto skatinant dalyvius pristatyti į renginį daugiau modelių, galima prigalvoti daugiau papildomų nominacijų, pvz. žiūrovai renka ne tik geriausia modelį, bet geriausius tanką, laivą, automobilį, lėktuvą ir t.t., galima leisti rėmėjams skirti specialius rėmėjo prizus (patys ir įvertintų) ir t.t. ir pan.
Dėl pačių teisėjų darbo. Manau, kad visai protinga, jei teisėjų grupė, žiūrėdami į modelius ir prieš pradėdami išsamiai vertinti, atrenka potencialius favoritus arba atmeta aiškius outsiderius. (turint laiko, gali vertinti ir visus - taip ypač pradedantys teisėjai įgyja patirties.) Galutinai vertinamų modelių skaičius neturi būti ribojamas (3, 5, 6, 10 ar kt.) - teisėjai turi elgtis pagal situaciją. Modeliai gali būti panašaus lygio, o žiūrint išsamiau - pasimato klaidos/privalumai, nepastebimi vien tik apžvelgus visus modelius kartu. Kitaip tariant, teisėjų grupė turi teisę pasirinkti ir nuspręsti ką ir kaip vertinti. Šio konkurso metu, dalis teisėjų grupių tokiu principu, beje, ir dirbo.
Dėl laiminčių nevertų modelių. Visada yra galimybė suklysti ir teisėjui (neprofesionalumas ??), tačiau vertinant atskirus kriterijus (dėl jų "svorio" diskutuota irgi n kartų), bendras rezultatas gaunasi teisingesnis. Čia mano nomonė Juk sutikime, jei reiktų rinkti geriausią modelį, vienam žmogui labiau patiks tankas, kitam laivas; vienam svarbiau atrodys daug smulkių detalių, kitam svarbiau kad modelis nekreivas būtų, o dar kitas susižavės ryškiomis dažymo spalvomis. Čia galima tęsti be galo Kad laimi to neverti modeliai - problema teisėjų neprofesionalume (teisėjus galima auklėti ir mokyti), arba manančio, kad modelis "nevertas", išankstiniame įsitikinime/nuomonėje (bet juk ne visada visų nuomonės turi sutapti).
Dėl ilgo skaičiavimo. Tam šį kart labai "padėjo" kategorijų gausa ir ribotas skaičiuotojų skaičius Kategorijas būtų gerai peržiūrėti, bet absoliučiai suprastinti nereikėtų. Maksimalaus skaičiavimo automatizavimo irgi dar nepasiekėme. Galimas variantas rezultatų išaiškinimui - jei dalyvių tik keletas ir aiškūs lyderiai, teisėjams galima leisti iš karto surašyti vietas - geriau teisėjai ir skaičiuotojai tegul užsiima tomis kategorijomis, kur daug vienodo lygio modelių.
O kalbant apie kolegų iš Sparnų 72 konservatyvumą - kaip vertinimas su lentelėmis nėra konservatyvus, taip vertinimas be skaičiavimų nėra novatoriškas tiesiog požiūriai skirtingi. Iš kitos pusės - man asmeniškai (na, kaip "plastmasiniam lėktuvistui" su labai retomis išimtimis) priimtinesnis mano modelių vertinimas su lentelėmis, ir visiškai nesvarbu, kaip bus vertinami pvz. kartoniniai technikos modeliai. Jei tinka patiems modeliuotojams - nors ir popieriaus faktūra/tekstūra ar dar kažką kitą tegul vertina Bet būtų smagu, jei būtų kokia nors daugmaž suprantama sistema, net ir ten kur modelių gal nepažįstu...
auktis » 2010 Geg 10 (Pir) 2:09 Beje, dar buvo problemos dėl vertinimo kriterijų atskirose kategorijose. Bet darant taisykles, atsikirų, pavadinkime, "suinteresuotų" grupių, t.y. savų sričių, modeliuotojai iniciatyvos neparodė...
skuduriukas » 2010 Geg 10 (Pir) 8:24 Sveiki. Nesu didelis teisėjavimo žinovas modeliavime, bet aukčio mintims kai kurioms pritariu. Tikrai nemanau kad vienodai ilgai ir nuodugniai reikai vertinti labai gerus modelius ir nelabai kokius. Jei iškart matosi, kad modelis kreivas šleivas ir dar velnias žino koks, kam prie jo gaišti laiką ir vertinti pagal kiekvieną kriterijų. Ar nebūtų geriau, jei teisėjai bendru sutartimu iš visos kategorijos atrinktų 5-7 geriausius modelius, ir tuomet juos vertintų balais. Manau sutaupytume ir laiko ir popieriaus
Reynevan » 2010 Geg 10 (Pir) 12:38 Mano nuomone, vertinimas skaičiuojant balus, gal ir iškeltų į aukštesnį lygį, o gal ir ne. Kodėl? Todėl, kad modelių vertinimas lentelėse reikalauja teisėjų profesionalumo, kuris yra tik tarp Sparnai 72 klubo narių. Jie vertina savo modelius jau seniai. Tačiau mūsų teisėjai net nenutuokia kaip reikėtų vertinti modelius ir gaunasi taip, kad dažnai laimi prastesnės kokybės modeliai. Manau, turime siekti paprastumo. Pvz.: teisėjai tankistai - jie gi mato kurie modeliai yra geriausi, tai tegu juos ir išrenka. Kam dar reikalingos tos lentelės? Kai prasideda balai ir lentelės, gaunasi tik chaosas ir turint dviejų konkursų patirtį galiu teigti, kad teisėjavimas su lentelėm mūsų renginiui nepriduoda profesionalumo ir aukšto lygio, o traukia jį žemyn dėl prasto vertinimo.
Dėl teisėjų kvalifikacijos, nelabai įsivaizduoju kaip tinkamai paruošti teisėjus iš visos Lietuvos. Nevažiuosi gi į Klaipėda, Panevėžį ir kitus miestus specialiai tam, kad juos mokyti kaip tinkamai teisėjauti.
auktis rašė: Bet pirmiausia dėl pačio konkurso principo - aš vis dar ir vis labiau esu įsitikinęs, kad konkurse turi būti vertinamas vienas to pačio modeliuotojo modelis vienoje kategorijoje
Ta mintis gal ir būtų logiška, bet aš jai dar negaliu pritarti. Kodėl? Todėl, kad jeigu taip padarysime, kitais metais konkurso metu matysim ne 800 modelių, o 300. Gal aš klystu, bet manau, kad žmonės nelabai nori vežti 30 modelių į parodą. Ir papildomos skatinančios nominacijos nelabai padės kas daro nedidelius modeliukus.
Reynevan » 2010 Geg 10 (Pir) 20:21 Va, dar. Nelabai suprantu kodėl vertinant lentelėse su balais vertinimas skaitosi profesionalesnis ir aukštesnio lygio. Čia be povandeninių akmenų, tiesiog įdomu. Nes galvoju apie tai. Jeigu kategoriją vertina pvz.: 5 :"tankistai", kurie supranta savo reikalą, kam jiems reikalingi tušinukai ir balai, jeigu jie ir taip gali išrinkti geriausius modelius?
auktis » 2010 Geg 11 (Ant) 2:30 Reynevan rašė:Va, dar. Nelabai suprantu kodėl vertinant lentelėse su balais vertinimas skaitosi profesionalesnis ir aukštesnio lygio. Čia be povandeninių akmenų, tiesiog įdomu. Nes galvoju apie tai. Jeigu kategoriją vertina pvz.: 5 :"tankistai", kurie supranta savo reikalą, kam jiems reikalingi tušinukai ir balai, jeigu jie ir taip gali išrinkti geriausius modelius?
Gerai jei teisėjų nuomonė sutampa visiškai arba modeliai yra akivaizdžiai skirtingo lygio. Tuomet gal ir nereikia nieko rašyti. Bet dažniausiai ne visi supranta savo reikalą vienodai. O kai nuomonės skirtingos - paprastai laimi tas, kuris garsiau kalba , taigi lentelės civilizuotai ir demokratiškai išklauso visų nuomones
Rašymas ir vertinimas balais sumažina šališkumo("pažįstamo/šiaip gero žmogaus modelis", "prizinę vietą reikėtų skirti jam", ir tt ir pan) ir išankstinių nuostatų (pvz."man gražesnis šitas dažymas", "toks dažymas šiam aparatui labai tinka" ir pan.) įtaką, tuo labiau kai pas mus visi modeliuotojai kolegas pažįsta ir modelius žino.
Kai modeliai yra panašaus lygio, pildant lenteles paprasčiau teisingai paskirstyti į vietas modelius.
Primityvus pvz.: trys modeliai, kai pvz. A yra idealiai nudažytas ir nuglaistytas, truputį kreivas, detalizavimo lygis vidutiniškas; B - nekreivas, bet su smulkiu dažymo broku, puikiai nuglaistytas, detalizavimas prastas, o C- normaliai nudažytas, truputį kreivas, vietomis neužglaistytas, ir labai detalizuotas. Kuris geriausias? Išskiriame kriterijus - glaistymą, dažymą, kreivumą, detalizavimą - ir juos įvertiname. Kaip toliau apdoroti vertinimus - susitarimo reikalas: galim sumuoti balus, suteikti kriterijams skirtingus svorius, skaičiuoti vidurkius, ar kt. Ir turime apskaičiuotą rezultatą.
Apskaičiuotą rezultatą lengvai galime pagrįsti - į klausimus "kodėl" parodome, kad "čia modelis geras, čia yra klaidų, pas konkurentą klaidų čia nėra". Taip ir modeliuotojas žino, kur turi pasistengti ateityje. T.y. keliamas modeliavimo lygis.
auktis » 2010 Geg 11 (Ant) 3:05 Reynevan rašė:Mano nuomone, vertinimas skaičiuojant balus, gal ir iškeltų į aukštesnį lygį, o gal ir ne. Kodėl? Todėl, kad modelių vertinimas lentelėse reikalauja teisėjų profesionalumo, kuris yra tik tarp Sparnai 72 klubo narių. Jie vertina savo modelius jau seniai. Tačiau mūsų teisėjai net nenutuokia kaip reikėtų vertinti modelius ir gaunasi taip, kad dažnai laimi prastesnės kokybės modeliai. Manau, turime siekti paprastumo. Pvz.: teisėjai tankistai - jie gi mato kurie modeliai yra geriausi, tai tegu juos ir išrenka. Kam dar reikalingos tos lentelės?
Nesustokime ties paprastumu (primytyvumu), o siekime profesionalumo - kuo toliau, tuo geriau mokės teisėjai vertinti.
Patirtis iš oro neatsiranda.
Reynevan rašė:Kai prasideda balai ir lentelės, gaunasi tik chaosas ir turint dviejų konkursų patirtį galiu teigti, kad teisėjavimas su lentelėm mūsų renginiui nepriduoda profesionalumo ir aukšto lygio, o traukia jį žemyn dėl prasto vertinimo.
Ar buvo po šio renginio nusiskundimų iš dalyvių dėl prasto vertinimo, kuomet vertino savos srities žinovai? Greičiau bus nusiskundimų, kai vertinimai neaiškūs pagal ką.
Reynevan rašė:Dėl teisėjų kvalifikacijos, nelabai įsivaizduoju kaip tinkamai paruošti teisėjus iš visos Lietuvos. Nevažiuosi gi į Klaipėda, Panevėžį ir kitus miestus specialiai tam, kad juos mokyti kaip tinkamai teisėjauti.
Teisėjai, iš anksto turėdami taisykles, ir suprasdami savo sritį, žinos, kaip teisėjauti (principus). O patirtis įgyjama palaipsniui. Dabar sistema iš esmės yra "fool proof" - atskirus kriterijus tereikia įvertinti balais (pažymiu). Svarbiausia yra pačius kriterijus kuo tiksliau apibrėžti.
Reynevan rašė:
auktis rašė: Bet pirmiausia dėl pačio konkurso principo - aš vis dar ir vis labiau esu įsitikinęs, kad konkurse turi būti vertinamas vienas to pačio modeliuotojo modelis vienoje kategorijoje
Ta mintis gal ir būtų logiška, bet aš jai dar negaliu pritarti. Kodėl? Todėl, kad jeigu taip padarysime, kitais metais konkurso metu matysim ne 800 modelių, o 300. Gal aš klystu, bet manau, kad žmonės nelabai nori vežti 30 modelių į parodą. Ir papildomos skatinančios nominacijos nelabai padės kas daro nedidelius modeliukus.
Modelių skaičius parodose nebūtinai privalo didėti iki begalybės, jis kada nors vis vien nusistovės. Vieni modelius vežti nori, kiti nenori. Kad užsimanytų, galime nominuoti pvz gausiausią ar geriausią teminę kolekciją - gal bus papildomas interesas atvežti daugiau modelių. O ir dabar juk irgi iš esmės yra tas pats: galima atvežti kiek nori modelių, bet apdovanojama tik už vieną, kitaip sakant, kiti (antras ir trečias) modeliai arba vertinami be reikalo, arba realiai nevertinami. Paskelbėme, kad "vienas modeliuotojas gali užimti tik vieną prizinę vietą vienoje kategorijoje", ar modelių nuo to sumažėjo? Papildomi modeliai tik padėjo kai kuriose kategorijose konkursui įvykti, nes dirbtinai padidino dalyvių skaičių O ar išrašyti padėkas, ar diplomus - skirtumas manau menkas
geris » 2010 Geg 11 (Ant) 11:59 Manau, kad vertinimas lentelėmis yra priimtinas ir taikytinas. Pritariu Aukčio nuomonei, kad tyliausi teisėjai bus neišgirsti, o tie kur rėkia, tie ir "įkiš" savo nuomonę. Čia jei teisėjavimas vyktų be lentelių. Žinoma, tam tikroje kategorijoje, susirinkę teisėjai gali žodžiu aptarti, išsirinkti favoritus, nuspręsti, bet vertinimas vistik turėtų baigtis lentelėmis ir balų surašymais. Problema ne lentelės, o lentelių turinys, t.y. vertinimo kriterijai. Mano nuomonė tokia: kiekvienai kategorijai vertinimo kriterijai turėtų būti kuriami atskirai ir tokie, kurie būdingi tik tai kategorijai. Plastikas ir kartonas kaip diena nuo nakties - čia ir taip aišku. Bet pvz. tokie vertinimo kriterijai kaip "Įprasta įranga" ir "Papildoma įranga" tiks kartoninėje aviacijoje, tačiau kartoninėje architektūroje - nė žalio supratimo neturiu. Kadangi modeliai varžosi tik savo kategorijose ir pačios kategorijos tarpusavyje nesivaržo, tai jei bus skirtingi kategorijų vertinimo kriterijai, manau niekas nenukentės. Atvirkščiai, bus įvesta logika ir darbo palengvinimas teisėjams. Beje, manau, kad patys teisėjai, teisėjaujantys pvz. plastikiniuose tankuose, turėtų patys prisidėti prie vertinimo kriterijų kūrimo plastikinių tankų kategorijai. Tada jiems patiems teisėjauti bus kur kas lengviau. Nežinau, man asmeniškai šitie reikalai, kaip teisėjui, labiausiai užkliuvo, nes tikrai buvo momentų, kai neįsivaizduodavau, kaip vertinti pvz. "Afrikos žvėris" pagal "Įprastą įrangą" ir tekdavo lakstyti pas Liną su klausimais.
Reynevan » 2010 Geg 11 (Ant) 23:59 auktis rašė: Gerai jei teisėjų nuomonė sutampa visiškai arba modeliai yra akivaizdžiai skirtingo lygio. Tuomet gal ir nereikia nieko rašyti. Bet dažniausiai ne visi supranta savo reikalą vienodai. O kai nuomonės skirtingos - paprastai laimi tas, kuris garsiau kalba , taigi lentelės civilizuotai ir demokratiškai išklauso visų nuomones
Čia yra argumentas, sutinku kad racijos tame yra. Dabar supratau kam yra skirtos tos lentelės. Gerai, pagalvojam dar.
auktis » 2010 Geg 12 (Tre) 9:35 geris rašė:<...>neįsivaizduodavau, kaip vertinti pvz. "Afrikos žvėris" pagal "Įprastą įrangą" <...>
Na, dėl to - turetu teisėjų grupė prieš vertinadami susitarti, kas vertinama. Lentelės gali būti ir bendros, tik teisėjai prieš vertindami išsibraukia, ko nevertins. Nes kiekvienai egzotiškai kategorijai atskirų kriterijų ir lentelių neprigalvosi. Kitas metai bus kokie nors, pvz., "vabzdžių pasaulyje" arba prie kartoninės dešros padarys ir kartoninį svogūną , ir vėl lyg ir trūks kažkokių kriterijų. Aš manau, kad būtent "dešrų ir žvėrių kategorijoje" ar pan. mažiausiai reikia gaišti pildant lenteles ir vietas daugeliu atveju galima paskirstyti teisėjams susitarus