Pri príprave súťažných podkladov príde chvíľa, ktorú pozná každý nákupca. Pred nami leží tabuľka hodnotiacich kritérií a otázka, ktorá sa zdá byť jednoduchá: koľko bodov dať cene a koľko kvalite (záruka, energetická spotreba, technické parametre…)? Súčet váh musí dať 100 percent alebo napríklad 100 bodov – to je jediná istota. Samotné čísla však treba nejako zdôvodniť.
A práve tu väčšina nákupcov siahne po čísle intuitívne – a pochopiteľne, lebo zákon nám postup neurčuje. Verejné obstarávanie však nie je len o zákone. Je aj o nákupnom know-how, ktoré nám pomáha nastaviť súťaž tak, aby jej výsledok zodpovedal tomu, čo skutočne chceme nakúpiť.
Pritom tieto čísla rozhodujú o výsledku súťaže viac, ako sa zdá. Lenže nastaviť ich správne nie je úplne jednoduché – a práve preto väčšina nákupcov siahne po najjednoduchšom riešení: súťaží len na cenu. Je to na prvý pohľad bezpečné a ľahko obhájiteľné.
V tomto článku sa pozrieme na to, čo sa za tými číslami skutočne skrýva a ako váhy nastaviť tak, aby výsledok súťaže zodpovedal tomu, čo chceme nakúpiť.
Dôležitosť nestačí. Čo váha skutočne znamená?
Začneme otázkou, ktorá sa zdá byť jednoduchá. Súťažíte opravu mosta. Máte dve kritériá – cenu a čas dokončenia. Cena je pre vás dôležitejšia, takže jej dáte 75 percent a času dokončenia 25 percent. Logické, prehľadné, obhájiteľné.
Teraz prídu dve ponuky. Prvá: 500 000 € a dokončenie za 12 mesiacov. Druhá: 510 000 € a dokončenie za 8 mesiacov. Ktorú vyberiete?
Väčšina nákupcov by v tomto momente predpokladala, že pri váhe ceny 75 % vyhrá lacnejšia ponuka. A po prepočítaní cez vzorec by to tak aj vyšlo. Ale je to skutočne to, čo chcete? Ste ochotní odmietnuť skrátenie lehoty o štyri mesiace výmenou za úsporu 10 000 € – teda 2 % z ceny zákazky? Možno áno. Možno nie. A práve to je problém – vaše váhy vám na túto otázku neodpovedia.
Tento paradox má v praxi reálne dôsledky. Mateus, Ferreira a Carreira (2010) označujú priradenie váh na základe pocitu dôležitosti za najrozšírenejšiu a zároveň najzávažnejšiu chybu v celom procese hodnotenia ponúk. Nie preto, že by dôležitosť bola irelevantná – je to prirodzený štartovací bod. Problém je v tom, čo sa za tou dôležitosťou skrýva, alebo skôr čo sa za ňou neskrýva.
Váha totiž nie je vyjadrením dôležitosti v abstraktnom zmysle. Váha je matematicky vyjadrená ochota k výmene – hovorí, koľko bodov straty v jednom kritériu ste pripravení kompenzovať ziskom v inom. Odborná literatúra pre to používa pojem „trade-off“. A bez toho, aby sme vopred vedeli, čo konkrétne jednotlivé body v každom kritériu predstavujú, zostávajú tieto percentá len číslami bez obsahu. Bergman a Lundberg (2013) to potvrdzujú: aj keď máte vopred stanovené váhy, hodnotenie nemusí odrážať váš skutočný nákupný cieľ – ak nemáte dobre nastavený bodovací vzorec. Stačí zmeniť spôsob, akým prideľujete body v rámci jedného kritéria, a výsledok súťaže sa zmení, hoci ponuky uchádzačov ostanú úplne rovnaké. To, čo dáva váham skutočný obsah, je správne nastavený bodovací vzorec pre každé kritérium. A o tom bude reč v ďalšej časti.
- Ponuka A: 500 000 € / 12 mesiacov
- Ponuka B: 510 000 € / 8 mesiacov
Váhy teda nikdy nepracujú samy o sebe – rozhodujúce je aj to, ako sa body v každom kritériu konkrétne prideľujú. Ako sa body prideľujú a aké riziká prináša zlý výber bodovacieho vzorca sme rozobrali v samostatnom článku o hodnotení ponúk na kvalitu.
Váhy a bodovací vzorec: dve strany tej istej mince
V predchádzajúcej časti sme si ukázali, že váha nie je len číslo vyjadrujúce dôležitosť – je to vyjadrenie ochoty k výmene medzi kritériami. Tu príde ďalší, rovnako dôležitý krok: váhy nemôžete nastaviť skôr, ako viete, ako budete body v každom kritériu prideľovať. Sú to dve strany tej istej mince – a väčšina nákupcov ich od seba oddeľuje.
Prečo je to problém? Mateus et al. (2010) to vysvetľujú jasne: váhy predstavujú výmenné pomery medzi bodmi jednotlivých kritérií. To znamená, že ich zmysel závisí priamo od toho, čo tie body predstavujú. Ak neviete, ako budete body v jednotlivých kritériách prideľovať, nemôžete vedieť, čo váha 75 % pre cenu v skutočnosti hovorí. Nastavujete váhy pre niečo, čo ešte neexistuje.
Správne poradie krokov pri nastavovaní hodnotiacich kritérií
Definícia kritérií
Čo budeme hodnotiť?
Meradlá výkonu
Čo a v akých jednotkách budeme porovnávať?
Bodovací vzorec
Čo jednotlivé body reálne znamenajú?
Váhy kritérií
Výmenné pomery medzi kritériami.
Zdroj: Mateus, Ferreira a Carreira (2010)
Dodgson et al. (2009) to v metodickej príručke britskej vlády pre rozhodovanie vo verejnom sektore formulujú ako základnú požiadavku: váhy a bodovací vzorec musia byť nastavené spoločne, nie postupne. Váhy musia odrážať rozdiely medzi najlepším a najhorším možným výkonom v každom kritériu – a tieto rozdiely definuje práve bodovací vzorec.
Ale ako to vyzerá v praxi? Mateus et al. (2010) ukazujú jednoduché riešenie. Namiesto toho, aby ste váhy odhadovali od oka, položte si konkrétnu otázku. Zostavte si dve cvičné ponuky s reálnymi trhovými hodnotami a opýtajte sa – keby ste si mohli vybrať len medzi týmito dvoma, ktorá by bola pre vás výhodnejšia?
Napríklad pri oprave mosta: Ponuka A – cena 200 000 € a lehota 50 dní. Ponuka B – cena 300 000 € a lehota 30 dní. Ponuka B je o 100 000 € drahšia, ale most bude hotový o 20 dní skôr. Otázka teda znie, či vám tých 20 dní stojí za 100 000 €.
Odpoveď viete odvodiť z reálnych nákladov. Každý deň, čo je most zatvorený, niečo stojí (náklady na dočasné dopravné značenie, vyššie náklady na odklonené linky verejnej dopravy, atď.). Keď si spočítate, koľko vás stojí jeden deň zatvorenia mosta, a vynásobíte to počtom dní, dostanete sumu, akú má pre vás skrátenie lehoty reálnu hodnotu. A práve od tejto sumy sa odvíjajú váhy oboch kritérií. Ako presne sa z tejto úvahy stanú konkrétne váhy, si ukážeme v nasledujúcej kapitole.
Ako sa k správnym váham dopracovať v praxi
Vieme teda, čo váhy sú a prečo ich nemožno nastavovať od oka. Zostáva najdôležitejšia otázka: ako to urobiť správne? Skôr než sa pustíme do metodík, je dôležité poznamenať jednu vec, ktorá sa často v praxi prehliada: váhy nie sú len hodnoty dosadené do vzorca – za každým percentom alebo bodom stojí reálne rozhodnutie, koľko ste ochotní priplatiť za lepšiu kvalitu. Keď nastavíte kvalite realizačného tímu váhu 30 %, hovoríte, že ste ako inštitúcia ochotní za výnimočný tím zaplatiť o určité percento viac, ako za priemerný tím. Toto rozhodnutie musíte vedieť obhájiť – pred nadriadenými, štatutárom, poslancami, verejnosťou a kýmkoľvek, kto sa opýta, prečo nebol vybraný najlacnejší uchádzač. Bergman a Lundberg (2013) to formulujú ekonomicky presne: váhy implicitne stanovujú cenu, ktorú je verejný obstarávateľ ochotný zaplatiť za jednotku kvality. Ak túto cenu nevedia zdôvodniť, váhy nemajú pevný základ.
Prvým krokom ešte pred samotným nastavením váh je definovanie toho, čo považujete za dobrý a čo za prijateľný výkon v každom kritériu. Matos et al. (2024) to nazývajú referenčnými úrovňami – „dobrá“ ponuka je tá, ktorú by ste bez váhania označili za atraktívnu, „neutrálna“ je taká, ktorá vás nenadchne, ale neodmietli by ste ju. Tieto dva body sú kotvami, od ktorých sa odvíja celý bodovací vzorec – a bez nich nemá zmysel o váhach vôbec uvažovať.
Odborná literatúra opisuje viacero metodík, ako sa k váham dopracovať. Líšia sa náročnosťou aj presnosťou – niektoré vás prevedú štruktúrovaným procesom, iné sa spoliehajú na váš úsudok. Poďme sa na ne pozrieť.
1. Trade-off postup
Trade-off postup je podľa Mateus et al. (2010) najpriamočiarejší spôsob, ako odvodiť váhy. Princíp je jednoduchý: zostavíte si dve cvičné ponuky s reálnymi trhovými hodnotami, pričom každá vyniká v inom kritériu. Potom si položíte otázku: ktorá je pre mňa výhodnejšia? A koľko som ochotný priplatiť na cene za lepšie plnenie v kvalitativnom kritériu?
- Ponuka A: cena 200 000 €, lehota 50 dní – najlacnejšia, ale s najdlhšou lehotou
- Ponuka B: cena 300 000 €, lehota 30 dní – najdrahšia, ale s najkratšou lehotou
Konkrétne percentá závisia od toho, ako sú kritériá bodované. Rovnaké rozhodnutie – „priplatím si 25 000 € za kratšiu lehotu“ – môže pri odlišnom spôsobe bodovania viesť k iným váham. Preto sa oplatí nastavené váhy pred vyhlásením súťaže otestovať na cvičných ponukách, napríklad v našej QPS kalkulačke (na konci článku). Uvidíte tak, či výsledok naozaj zodpovedá tomu, čo chcete nakúpiť.
Sila tejto metódy spočíva v tom, že vás prinúti premýšľať v konkrétnych eurách a reálnych trhových hodnotách, nie v abstraktných percentách. Bez znalosti trhu, teda bez toho, aby ste vedeli, aký je reálny rozsah cien a lehôt sa však k zmysluplným váham nedopracujete. A to platí pre akúkoľvek metódu, nie len pre trade-off postup.
2. Swing weighting
Swing weighting – metóda váženia kritérií podľa očakávaného rozsahu rozdielov medzi ponukami – vychádza z jednoduchej myšlienky: váha kritéria závisí nielen od toho, ako veľmi vám na ňom záleží, ale aj od toho, aký veľký rozdiel medzi ponukami reálne očakávate. Kritérium, ktoré je pre vás dôležité, ale kde všetci uchádzači ponúknu prakticky to isté, nemá zmysel váhovo zvýhodňovať – jednoducho nebude rozlišovať. Dodgson et al. (2009) to nazývajú „swingom“ – teda rozsahom rozdielu medzi najhorším a najlepším reálne očakávaným plnením v danom kritériu. Čím väčší swing, tým vyššia váha.
Aj tu je nevyhnutné poznať trh – rovnako ako pri trade-off postupe. Ak neviete, aké rozdiely medzi ponukami reálne očakávať, swing weighting vám nepomôže.
3. MACBETH
MACBETH je metóda, ktorá pracuje s tým, čo je ľuďom najprirodzenejšie, so slovným hodnotením. Namiesto toho, aby ste priamo priraďovali čísla, odpovedáte na otázky typu: „Aký veľký je rozdiel v atraktivite medzi týmito dvoma úrovňami plnenia?“ Odpoveď volíte na slovnej škále – od „žiadny rozdiel“ cez „slabý“, „stredný“, „silný“ až po „extrémny“ (Dodgson et al., 2009). Softvér MACBETH potom z vašich odpovedí automaticky vypočíta bodovací vzorec aj váhy – a overí, či sú vaše odpovede navzájom konzistentné. Ak si napríklad v jednom momente poviete, že lehota je dôležitejšia ako cena, ale v inom momente sa rozhodnete opačne, softvér vás na to upozorní.
Matos et al. (2024) aplikovali MACBETH na reálnu stavebnú zákazku v Lisabone, kde komisia hodnotila 27 kritérií vrátane ceny, technického riešenia, skúseností tímu a BIM implementácie. Výsledok bol prekvapivý: bez MACBETH by finančným kritériám priradili váhu okolo 30 %. Po štruktúrovanom procese slovných porovnaní im MACBETH určil váhu len 10 % – pretože rozdiely medzi uchádzačmi v cene boli reálne malé a komisii v skutočnosti záležalo viac na technickej kvalite. Rozdiel 20 percentuálnych bodov by za iných okolností rozhodol o víťazovi súťaže.
Hlavnou výhodou MACBETH je, že od vás nevyžaduje prácu s číslami – softvér prevedie vaše slovné hodnotenia na presné matematické výstupy. Nevýhodou je, že vyžaduje špeciálny softvér a skúsenosť s jeho používaním. Napriek tomu Matos et al. (2024) aj Dodgson et al. (2009) ho považujú za jednu z najspoľahlivejších metód, najmä pri zložitých zákazkách s väčším počtom kritérií.
4. Analytický hierarchický proces (AHP)
AHP je metóda, ktorú vyvinul matematik Thomas Saaty a ktorá je jednou z najrozšírenejších metód viackriterálneho rozhodovania na svete (Dodgson et al., 2009). Funguje na princípe párového porovnávania: namiesto toho, aby ste naraz hodnotili všetky kritériá, porovnávate ich vždy len dve a dve. Pri každom páre odpovedáte na otázku: „O koľko je pre mňa kritérium A dôležitejšie ako kritérium B?“ Odpoveď vyjadrujete na škále od 1 (rovnako dôležité) do 9 (jedno je oproti druhému dominantné). Zo všetkých párových porovnaní potom softvér vypočíta výsledné váhy.
AHP má oproti iným metódam jednu praktickú výhodu: párové porovnávanie je pre väčšinu ľudí intuitívne a ľahko pochopiteľné. Dodgson et al. (2009) však upozorňujú aj na vážne obmedzenia. Škála 1–9 môže pri väčšom počte kritérií viesť k vnútorným nekonzistenciám. A čo je zásadnejšie, AHP tradične porovnáva dôležitosť kritérií bez ohľadu na bodovací vzorec. To je presne tá chyba, o ktorej sme hovorili v predchádzajúcich kapitolách: váhy sa nastavujú bez toho, aby ste vedeli, čo body v jednotlivých kritériách reálne znamenajú.
5. Skupinové stanovenie váh
Všetky doterajšie metódy predpokladajú, že o váhach rozhoduje jeden človek alebo skupina, ktorá sa dohodne pri “jednom stole”. V praxi verejného obstarávania to ale často vyzerá inak: na príprave súťažných podkladov sa podieľa viac ľudí s rôznymi prioritami. Jeden chce predovšetkým kvalitu, druhý tlačí na cenu, tretí sa sústredí na technické parametre. Ako sa dohodnúť na váhach tak, aby boli všetci spokojní?
Dodgson et al. (2009) opisujú postup, ktorý nazývajú nominálna skupinová technika. Funguje v štyroch krokoch. Najprv každý člen skupiny nezávisle a bez diskusie napíše svoju navrhovanú váhu pre dané kritérium. Potom sa výsledky zverejnia a zaznamenajú, aby každý videl rozloženie názorov. Následne tí, ktorí navrhli najvyššiu a najnižšiu váhu, vysvetlia svoje dôvody – a až po tom nasleduje všeobecná skupinová diskusia. Na záver rozhodujúca podskupina – zvyčajne tí, ktorí sú najbližšie k finálnemu rozhodnutiu – stanoví výslednú váhu.
6. Priame priradenie váh (Direct assignment)
Priame priradenie váh je v praxi zďaleka najpoužívanejšia metóda, a zároveň tá, o ktorej sme hovorili na začiatku tohto článku. Guarini et al. (2015) ju opisujú jednoducho: celkový súčet váh (napríklad 100 %) sa rozdelí medzi kritériá priamo, na základe úsudku nákupcu. Žiadne párové porovnávanie, žiadny softvér, žiadne cvičné ponuky. Len rozhodnutie: cena dostane 60 %, kvalita 30 %, lehota 10 %.
Táto metóda nie je automaticky zlá. Je rýchla, jednoduchá a v mnohých prípadoch úplne postačujúca – najmä pri zákazkách, kde je predmet dobre známy, trh je stabilný a nákupca má dostatok skúseností s podobnými zákazkami. Problém nastáva vtedy, keď za tými číslami nestojí nič, okrem pocitu. Ak viete zdôvodniť, prečo ste cene dali 60 % a nie 50 % alebo 70 % (napríklad preto, že poznáte trh a viete, aké rozdiely medzi ponukami reálne očakávate), priame priradenie váh môže byť úplne legitímne.
Ak to však zdôvodniť neviete, stojí za to siahnuť po niektorej z metód, ktoré sme opísali vyššie. Nie preto, že by boli lepšie samy o sebe, ale preto, že vás prinútia nad váhami premýšľať hlbšie, ako by ste to urobili pri priamom priradení.
Spoločným menovateľom všetkých týchto metodík je to, čo Bergman a Lundberg (2013) pomenúvajú priamo: hodnotenie musí odrážať to, čo skutočne chcete nakúpiť. Nemusíte pritom hneď siahnuť po MACBETH softvéri. Dobrým začiatkom je simulácia ponúk ešte pred vyhlásením súťaže – či už v našej QPS kalkulačke alebo v Exceli. Ak vám výsledok simulácie dáva víťaza, s ktorým by ste spokojní neboli, je to jasný signál: buď váhy alebo bodovací vzorec neodráža to, čo chcete nakúpiť.
Záverom...
V tomto článku sme si ukázali, že váhy nemožno nastavovať izolovane od bodovacieho vzorca, že za každou váhou by malo stáť ekonomické zdôvodnenie a že existuje viacero overených metodík, od trade-off postupu, cez swing weighting a MACBETH, až po priame priradenie váh, ktoré vám môžu pomôcť dostať sa k číslam, za ktorými stojí reálne rozhodnutie.
Čo si z tohto článku odniesť do praxe:
1. Váhy nie sú len o dôležitosti, sú o tom, koľko ste ochotní priplatiť. Každé percento alebo bod pridelený kvalitativnému kritériu znamená, že ste ochotní akceptovať vyššiu cenu výmenou za lepšie plnenie. Ak toto nevieme zdôvodniť, váhy nemajú pevný základ.
2. Váhy a bodovací vzorec patria k sebe. Nastavovať váhy bez toho, aby ste vedeli, ako sa body v jednotlivých kritériách prideľujú, je ako rozhodovať sa naslepo. Jedno bez druhého nedáva zmysel.
3. Poznajte trh skôr, ako začnete nastavovať váhy. Bez znalosti reálneho rozsahu cien a kvalitativných parametrov na trhu sa k zmysluplným váham nedostanete žiadnou metódou.
4. Otestujte si váhy pred vyhlásením súťaže. Simulácia fiktívnych ponúk, či už v našej QPS kalkulačke alebo v Exceli, vám ukáže, či výsledok zodpovedá tomu, čo chcete nakúpiť. Ak nie, upravte váhy alebo bodovací vzorec ešte predtým, než súťaž vyhlásite.
5. Priame priradenie váh nie je chyba, ak ho viete zdôvodniť. Nie každá zákazka vyžaduje MACBETH alebo AHP. Ale každá zákazka vyžaduje, aby ste vedeli povedať, prečo ste kritériám priradili práve také váhy, aké ste priradili.