Klub čítačov a písačov SF&F

Hm, ten výsledok pre kapa je podľa jednej interpretácie v pásme 0.01 – 0.20 Slight agreement. Takže asi by som to svoje podozrenie, že porotcovia si jednoducho hádzali desaťstennou kockou zavrhla :-)
Ale slabým miestom toho testu asi bude, že sa berú do úvahy početnosti v jednotlivých kategóriách, ale nie to ako blízko k sebe jednotlivé kategórie sú, resp. tiež že kategórií je priveľa a početnosti níke. Chcelo by to nejakého odboríka na štatistiku,hm...

Po vykonaní výpočtov a opravách viacerých chýb som dospel k hádam správnemu výsledku. Fleiss kappa hodnotení všetkých porotcov = 0,014439527
Čiže je to len tesne nad nulou, kedy už je úroveň zhody neodlíšiteľná od náhodného rozdelenia.

Podľa mňa to dokazuje, že každý z porotcov hodnotil inak, po svojom.

Uf,mas pravdu,neviem počítat.som to zratavala v zbornikovej tabulke a ked som napocitala 8 predomnou a 5 trinastiek,usudila som ze 9-13. miesto ma rovnaky pocet bodov a je to oznacene ako 13. Cele zle, 13. je 13. a 12 predo mnou!

Inak sranda,v hlavickach tabuliek ostali minulorocni porotcoviaz

No, idem si precitat tvoju recenziu:)

Una, inak, ktorá je tvoja poviedka? Lebo "osem lepších, štyri rovnaké" - to mi nejako nesedí s údajmi.

Tabuľku mám v Exceli. Korelácie som rátal excelovskou funkciou Correl (teda Pearsonov). Skúsim aj toho Fleissa. A áno, je to šibnuté.

No, niekomu chutí kapustnica, inému "Gordon Blue", ďalší ochká nad raw koláčikom alebo gurmánskou kôpočkou čohosi poliatou čímsi hnedým. Zároveň im stanovy súťaže dávajú voľné ruky, aby preferovali to, čo im chutí a potopili to, čo im nevonia. Toto je výsledok. A zrejme nie je záujem to nijako zmeniť.

Jasné, že aj ja vyplakávam nad svojím hodnotením. Najprv som v blogoch čítal, aká je moja poviedka fajn, aj na besede začiatkom septembra som počúval chvály a napokon som sa zaryl nosom do piatej desiatky celkového poradia. To naštve.

Či budem kandidovať do poroty, ešte netuším a ani neriešim. Zatiaľ príliš ďaleko. Ale poviedku do budúcoročnej súťaže písať nemienim.

a ty máš tú tabuľku v elektronickej forme?
neviem ako si rátal tie korelačné koeficienty (žeby Pearsonov koeficient vždy medzi dvomi porotcami? )
ale čo tak takýto súhrnný test na koreláciu medzi viacerými porotcami? to by bolo zaujímavé
http://en.wikipedia.org/wiki/Fleiss%27_kappa
(no neviem či to nie je trochu šibnuté takto podrobne štatisticky analyzovať výsledky literárnej súťaže, je však? :))

ono mne len nejde do hlavy, že pre niekoho úplný shit (1) a pre niekoho to najlepšie, čo sa dá napísať (10),
jednoducho, že to nezohľadňuje žiadne literárne kvality : formálna úprava, štylistika, autentickosť, svižnosť dialógov, zaujímavosť zápletky,
originalita, napätie, atď.

no možno to znie, že vyplakávam nad vlastným hodnotením, však ? :-)
o to nejde, ja som spokojná,(osem poviedok lepších ako moja, štyri rovnaké ,aj keď slovo lepších mi akosi ťažko ide napísať, vzhľadom na moje podozrenie na neserióznosť poroty, takže akokeby tomu svojmu hodnoteniu ani nemôžem prikladať váhu)

ešte taká moja drobná zvedavosť: recenziami ašpiruješ na člena poroty? :-)

Una, práve dopisujem recenziu na zborník, potom sa pustím do analýzy výsledkov. Zatiaľ sám neviem, čo z toho vyjde. Z prvých analýz vyplývajú nízke korelácie hodnotení porotcov - od 0,54 po takmer 0,0. Nula znamená, že hodnotenia od dvoch porotcov navzájom nijako nesúvisia, sú v podstatne náhodne usporiadané.
Krátka odpoveď na tvoju otázku znie: Žiadne konkrétne kritéria hodnotenia neboli na porotcoch požadované, preto si každý z porotcov hodnotil podľa vlastnej hlavy. A pretože sa tento rok zišli v porote mimoriadne odlišné osobnosti, muselo sa to na výsledkoch odzrkadliť. Je to akoby si v súťaži aranžovania kvetín mala záhradníka, drevorubača, sochára a architekta.
Čo ma najviac pobavilo, pri rôznych poviedkach zo zborníka sa hodnotením zhodujem s rôznymi porotcami, takže v podstate neviem nájsť takého, ktorý by hlasoval presne podľa mojej chuti, ani takého, čo by hlasoval presne naopak.

tak som sa dostala ku kompletnej tabuľke a ...
toto mi vysvetlite, ako môže niečo dostať od jedného porotcu 10 a od druhého 1
to tu fakt neexistujú nejaké objektívne kritéria, či je dielo dobré alebo nie? je to celé o chuti porotcov?

Škoda, chcel som prísť na vyhlasovanie, ale nevyšlo. Jednak už tretí deň chrchlem, no najmä večer mal môj najstarší potomok stužkovú a poobede som už bol v jednom kole. Musel som si vybrať.
Určite si s tebou (aj s inými) rád pokecám, keď niekedy vyjde príležitosť.

Ten Oakville nam to vsetkym natrel :-)

Ale s vitazom som spokojny.

A teraz sa tesim na recenzie zbornika, pre zmenu sa zasa mozte pustit aj do mna :-)

A diky, Zdeno, je to aj tvoja zasluha, ze som sa dostal tam, kde som. Skoda, ze som ta tam nevidel. Teda ani neviem, ci si tam vobec bol :-)