Design + evaluace = VSL

Vejdou designér a evaluátor do hospody... A dál už ten vtip není až tak vtipnej. Strávil jsem tisíce hodin na projektech, stovky studiem a zkouším obě řemesla v tomhle dlouhým článku propojit.

Ve veřejných inovacích a pilotním testování politik se léta potkávám s tím, že musím ladit svoje designérské notičky s evaluačními. No a protože to pořád občas skřípe a mám pocit, že děláme s evaluátory stejnou věc a jen jí říkáme jinak, potřeboval jsem si na to trochu posvítit. Dal jsem hodně času studiu, prošel školeními, početl si v knihách, radil se s AI a výsledek máte před sebou.

Text, který zkoumá, jak lze propojit teoreticky řízenou evaluaci (Theory-Driven Evaluation) v pojetí Huey T. Chena, principy designového přemýšlení (zejména fáze empatie–definice–ideace–prototypování–testování) a pragmatickou evaluaci (inspirovanou mj. myšlenkami Pattona, House a Shadishe).

Cílem je ukázat společné prvky, odlišnosti a možnosti syntézy těchto přístupů v kontextu sociálních inovací a pilotních projektů veřejných politik (sociální ochrana, komunitní péče, vzdělávání, klima aj.).

Na konci je prakticky orientovaný rámec, který zohledňuje komplexitu prostředí, iterativní postupy a teorii programu, doplněný doporučeními pro využití v praxi a ilustrativními případovými studiemi.

Jaký tenhle text může mít přínos pro vás?

• jestli děláte inovační projekty, nejspíš přestanete platit za stejnou práci dvěma lidem v týmu,

• jako evaluátorstvo se zamyslíte, jaká je souvislost vaší práce a práce designérstva, kde se překrývají a kde ne,

• jako designérstvo to budete mít naopak

Disclaimer 1: Nejsem evaluátor. Nemám na to školy. Jsem designér služeb (i když ani na to nemám školy). A je mi jasné, jak troufale tenhle text ve finále může působit. Jestli vás v něm něco naštve, cokoli popudí, nebo to celé budete vnímat jinak, napište mi. Textem spíš hledám odpovědi a za korekce a jiné perspektivy budu jen a jen rád.

Disclaimer 2: v textu redukuju realitu. Vybírám si takové typy evaluací, které mi pasují k designovému přístupu. A ještě jen v omezené míře. Spíš chci rozhýbat představivost, než být akademicky přesný.

Článek je trochu/dost teoretický a k praktičnosti míří ve své druhé polovině.

A na závěr úvodu tu je silné přesvědčení, které si nenechám jako designér služeb vymluvit a ani vy byste neměli. Jestli děláte svou práci jako designéři služeb nebo systémů poctivě, pracuje s visioningem, teoriemi změny, prototypy a jejich ověřováním a testováním, jestli vyhodnocujete a iterujete na základě testů… pak evaluujete.

Jestli zkoušíte rozličné věci, aby vaše práce dávala smysl a byla funkční, posilujete silné stránky a zabíjíte nefunkčnosti, pak evaluujete. A děláte to i bez toho, aniž byste znali evaluační terminologii. A je to tak v pořádku. Dělejte to dál.

Teoreticky řízená evaluace a Chenova integrovaná perspektiva

Teoreticky řízená evaluace staví do centra programovou teorii – explicitní model, jak má intervence (program či politika) vést ke kýženým výsledkům. Evaluátor nejprve ve spolupráci se stakeholdery formuluje teorii změny (theory of change), tedy předpokládaný mechanismus, jak činnosti programu vyvolají změnu.

Huey T. Chen, jeden ze zakladatelů tohoto přístupu, rozlišuje v rámci programové teorie dvě propojené složky: model akce a model změny.

• Model změny popisuje kauzální cestu od intervence k výsledkům – jaké determinanty či zprostředkující faktory program ovlivňuje, aby dosáhl zamýšlených změn. Jde v podstatě o teorii kauzality programu: pokud uděláme X, změní se Y (např. poskytování doučování povede ke zlepšení studijních výsledků znevýhodněných žáků skrze zvýšení jejich sebedůvěry a studijních dovedností).

• Model akce popisuje implementaci programu v kontextu: kdo a jak dodává intervenci cílové skupině. Zahrnuje specifikaci cílové populace a způsob jejího náboru, realizující organizaci a implementátory (personál), jejich role, školení a zdroje, dále postupy a protokoly poskytování služby, zapojené partnerské organizace a širší ekologický kontext programu (komunitu, rodiny, prostředí), který může výsledky ovlivňovat.

Chen ve svém integrovaném pojetí evaluace zdůrazňuje provázanost různých evaluačních cílů a metod. Navrhuje překlenout tradiční dichotomie jako formativní vs. sumativní evaluace či procesová vs. výsledková evaluace – dobrá evaluace podle něj kombinuje více úhlů pohledu.

Inovativně a pragmaticky propojuje teorii s praxí: evaluátor má identifikovat, konstruovat a ověřovat teorie, které v praxi fungují. Místo “černé skříňky” (jen měřit zda program funguje) otevírá vnitřní logiku programu – zkoumá, proč a jak výsledky vznikají nebo proč nenastaly. To napomáhá učení se a zlepšování programu v průběhu jeho realizace.

Chenův přístup tedy není dogmatický – naopak vybízí k využití celé škály metod (kvantitativních i kvalitativních) podle toho, co si daná programová teorie a kontext žádají.

Pro ilustraci: Pokud program nefunguje, teoreticky řízená evaluace pomůže odhalit, kde je problém – zda normativní teorie selhala (program byl realizován, jak měl, ale původní předpoklady o tom jak má vyvolat změnu byly mylné), nebo selhala implementace (myšlenka programu je správná, ale v praxi se nepodařilo realizovat klíčové komponenty). Podle zjištění pak lze buď upravit design programu (pokud neplatila kauzální teorie), anebo zlepšit implementaci (pokud byla teorie správná, ale nedodržela se v praxi).

Tím se programová teorie iterativně zdokonaluje – evaluace tu funguje jako zpětná vazba pro management programu, nikoli jen jako závěrečný verdikt. Chenův integrovaný rámec tak vytváří podmínky pro průběžné učení a reflexi v průběhu pilotních intervencí.

Design thinking: empatie, prototypování a iterace

Design thinking je přístup k řešení problémů, který klade důraz na pochopení lidských potřeb, tvořivost a rychlé zkoušení nápadů v praxi. Proslavil se zejména v oblasti produktového a servisního designu, ale stále více proniká i do veřejných politik a sociálních inovací. Klasický model d.school Stanfordské univerzity popisuje pět fází procesu: Empathize (empatie), Define (definice problému), Ideate (generování nápadů), Prototype (prototypování) a Test (testování).

• Ve fázi Empatie designéři (či inovátoři) hluboce zkoumají potřeby a zkušenosti lidí, kterých se problém týká. Pomocí rozhovorů, pozorování a zapojení uživatelů se snaží “vcítit” do jejich perspektivy a porozumět skutečným problémům a motivacím. To umožňuje odložit vlastní předpoklady a definovat problém očima těch, pro něž je řešení určeno.

• Následuje Definice, kdy se ze shromážděných poznatků formulují klíčové uživatelské potřeby a problémy, na které se řešení zaměří. Místo vágních či organizačně definovaných cílů se problém vyjadřuje lidsky a konkrétně (např. “Jak můžeme pomoci osamělým seniorům cítit se více propojeni se svou komunitou?”).

• Ve fázi Ideace se tým snaží vymyslet co nejširší paletu nápadů na možná řešení. Používají se kreativní techniky (brainstorming, brainwriting, “nejhorší nápad” aj.), důležité je nesoudit předčasně – generovat i divoké a nekonvenční nápady, protože i ty mohou vést k inovativním řešením.

• Poté přichází Prototypování – vybrané nápady se převádějí do hmatatelné podoby prototypů. Prototyp může být jednoduchý model, scénář, pilotní zavedení služby v malém měřítku apod. Klíčové je, že prototyp je dostatečně levný a rychlý, aby bylo možné ho vyzkoušet a nebát se případného nezdaru.

• Ve fázi Testování se prototypy ověřují s uživateli či v reálných podmínkách. Získaná zpětná vazba a data se pak používají k přeformulování problému nebo vylepšení návrhu – často se přitom odhalí nové poznatky, které vrátí tým zpět do předchozích fází (např. nově zjištěná potřeba si vyžádá úpravu původní definice problému nebo generování nových nápadů).

Celý proces design thinking je tedy iterativní a nelineární. Není to striktní posloupnost kroků, ale spíše cyklus učení se, kde neustále dochází k přizpůsobování řešení na základě toho, co se průběžně zjistí. Právě tato permanentní smyčka zpětné vazby a vylepšování zajišťuje, že výsledné inovace lépe odpovídají skutečným potřebám a fungují v praxi.

Design thinking navíc podporuje spolupráci se stakeholdery – uživatelé, klienti či občané jsou zapojeni do spoluvytváření řešení (co-design), čímž roste i jejich pocit vlastnictví a důvěra v nové nápady.

V kontextu veřejných politik nabývá designový přístup na významu. Pomáhá například prototypovat nové sociální služby či opatření v malém měřítku před tím, než se rozšíří plošně. Tím lze včas odhalit nefunkční prvky a ušetřit náklady spojené s neúspěšnými implementacemi.

V tomhle kontextu mrkněte na to, jak jsme ověřovali relevanci a funkčnost sousedských dětských skupin. V článku se nicméně nedozvíte, že nám data (i přes kvalitativní způsob testování) dlouhodobě ukazovala, že se po spuštění možnosti SDS zřizovat v prvních měsících dostaneme na pouhé spodní desítky registrovaných. Realita dnes bohužel až překvapivě odhadu odpovídá.

Design thinking také přináší empatii k uživateli do úřednického prostředí – místo aby se politika tvořila “od stolu”, vychází z reálných příběhů a dat z terénu. Jak ale uvidíme, designový cyklus sám o sobě nezaručuje, že nová řešení skutečně fungují – k tomu je zapotřebí systematická evaluace. A právě zde nastupuje pragmatický evaluační přístup.

Pragmatická evaluace: užitečnost, pluralita metod a adaptivní rozhodování

Pod označením pragmatická evaluace chápeme přístup, který klade důraz na praktickou využitelnost evaluace, pružné kombinování metod a orientaci na rozhodování v reálném světě.

Vychází z filozofie pragmatismu – pravda a hodnota poznatků se posuzuje podle jejich praktických důsledků (co nám pomohou rozhodnout a zlepšit). V evaluační teorii tuto orientaci ztělesňuje například Michael Quinn Patton se svou utilization-focused evaluation (evaluace zaměřená na uživatele a využití), Ernest R. House s důrazem na pluralitu hodnot a demokratickou deliberaci v evaluaci, či William Shadish, který zdůrazňoval potřebu integrace různých teoretických přístupů tak, aby evaluace sloužila ke generování použitelného poznání pro společenské problémy.

Pragmatický evaluátor začíná otázkou: „Kdo bude mé závěry využívat a k jakému rozhodnutí?” Tomu přizpůsobuje evaluační design. Patton například prosazuje, že kritériem kvality evaluace je její užitečnost pro zamýšlené uživatele – evaluátor má úzce spolupracovat s rozhodovateli, aby výsledky byly relevantní a včasné. Zároveň pragmatický přístup odmítá metodologický dogmatismus: kvantitativní či kvalitativní metody nejsou cílem samy o sobě, jsou to pouze nástroje, které volíme podle kontextu a typu otázky.

Důležitá je pluralita metod – kombinace tvrdých dat (třeba indikátory dopadu) s měkkými vhledy (příběhy, zkušenosti aktérů) poskytuje bohatší obraz a zvyšuje důvěryhodnost i přijatelnost evaluace pro různé zainteresované strany. Tento mixed-methods přístup má kořeny právě v pragmatismu, který hledá “co funguje” namísto držení se jedné ideologie výzkumu.

Zvláště významnou oblastí, kde pragmatická evaluace vyniká, je rozhodování v podmínkách komplexity. Tradiční lineární model “plán–implementace–hodnocení” často selhává u společenských problémů, které jsou komplexní, neustále se mění a nelze je plně předvídat (např. boj s chudobou, klimatická adaptace komunit, reforma vzdělávání). V těchto situacích se prosazuje tzv. developmental evaluation (vývojová evaluace), konceptualizovaná Pattonem.

Vývojová evaluace funguje podobně jako výzkum a vývoj (R&D) v soukromém sektoru: poskytuje průběžnou zpětnou vazbu inovátorům a pomáhá jim adaptovat strategii v reálném čase. Patton píše, že “Developmental Evaluation podporuje rozvoj inovací a jejich přizpůsobování se neočekávaným a dynamickým realitám v komplexním prostředí”. Jinými slovy, evaluátor je přítomen u zrodu a pilotování nových intervencí jako součást týmu a sbírá data v průběhu (observační poznámky, rychlé sondy, dílčí měření), aby mohl okamžitě informovat rozhodování a směrování dalšího postupu.

Takový přístup kombinuje kauzální logiku s adaptabilitou. Kauzální logika znamená, že i v komplexním projektu si tým udržuje určitý model toho, jak by intervence měla fungovat (teorii změny) – to umožňuje systematicky sledovat, zda se předpoklady naplňují, a vyvozovat příčinné vysvětlení: co vede k úspěchu či nezdaru.

Adaptabilita zase znamená, že se tento model průběžně aktualizuje podle toho, co se v terénu zjistí.

Evaluátor pomáhá klást otázky typu: „Co se právě teď vynořuje, zatímco se inovace rozvíjí? Jaké neočekávané efekty pozorujeme? Co na to širší prostředí?“. Z odpovědí pak společně s implementátory upravují další kroky.

Důležité je, že i při vysoké flexibilitě zůstává evaluace systematická – sběr dat a reflexe probíhá plánovitě a promyšleně, nikoli nahodile. Pragmatický evaluátor tak balancuje mezi rigorózností a flexibilitou: snaží se udržet důkazy věrohodné a závěry podložené (rigor), ale zároveň dodává informace včas, ve formě srozumitelné pro praktické rozhodování, a je připraven měnit fokus podle toho, jak se situace vyvíjí.

Shrnuto, pragmatická evaluace je orientovaná na akci a uživatele výsledků. Nehodnotí “pro akademii”, ale pro konkrétní stakeholdery – ať už to jsou politici rozhodující o pokračování pilotního programu, manažeři sociální služby hledající efektivnější postup, nebo komunita, která chce vědět, zda inovace skutečně přináší zlepšení jejich života.

Překryvy a rozdíly mezi přístupy

Přestože Theory-Driven Evaluation (TDE), design thinking (DT) a pragmatická evaluace (PE) vznikly v odlišných komunitách a používají jiný jazyk, najdeme mezi nimi překvapivě mnoho styčných ploch. Následující přehledová tabulka shrnuje hlavní charakteristiky a ukazuje, v čem se shodují a v čem doplňují:

Interpretace: TDE dodává strukturu a disciplínu – nutí nás ujasnit si, čemu věříme, že se stane, a to pak testovat. Design thinking vnáší kreativitu, lidskost a agilitu – učí nás rychle zkoušet a poučit se z chyb, dřív než investujeme velké zdroje. Pragmatická evaluace působí jako lepidlo, které to spojí s realitou rozhodování – udržuje nás při zemi, aby celý proces sloužil skutečným lidem a cílům, ne jen teoreticky či jako designérské cvičení. Namísto konkurování se tyto přístupy mohou navzájem obohatit – jak ukazuje následující část.

Syntéza přístupů: Integrovaný rámec pro evaluaci inovací skrze Research through Design

Kontext

V prostředí sociálních inovací a pilotních veřejných politik jsou klasické sekvenční modely „design → implementace → evaluace“ metodologicky i prakticky neudržitelné. Vysoká nejistota, proměnlivý kontext a tlak na učení během realizace vyžadují přístup, který integruje tvorbu a ověřování v jediném procesu.

Za vhodný rámec se jeví Research through Design (RtD) – metoda, která chápe návrh jako poznávací akt a umožňuje generovat prakticky relevantní poznání skrze prototypování, iteraci a testování v kontextu.

Argumentace

1. RtD řeší klíčové napětí mezi rychlostí a důkazem.
   – V tradičních přístupech bývá „rychlé testování“ v opozici k „rigorózní evaluaci“.
   – RtD umožňuje testovat v průběhu návrhu a iterací zpřesňovat nejen službu, ale i teorii změny.
   – Prototyp je zároveň nosič intervence a objekt evaluace.

2. Teorie programu není vstup, ale proměnný výstup.
   – V raných fázích inovací často neexistuje stabilní model změny.
   – RtD umožňuje jeho emergentní konstruování na základě testování a reflexe účinků.
   – To je v souladu s Chenovou distinkcí mezi modelem akce a modelem změny, ale umožňuje jejich iterativní spoluvývoj.

3. RtD posiluje rozhodovací kvalitu v komplexních systémech.
   – Pragmatická evaluace klade důraz na užitečnost poznání pro rozhodování.
   – RtD poskytuje nástroje pro generování „actionable insights“ skrze přímou zkušenost v terénu.
   – V souladu s vývojovou evaluací podporuje RtD reflexivní adaptaci během procesu, nikoliv až po něm.

4. Validita v RtD je zakotvená ve smysluplnosti jednání.
   – Nejde o statistickou inferenci, ale o „konstruktivní validitu“: zda intervence dává smysl v daném kontextu, zda vedla k učení, které lze přenést.
   – Evaluace se tak nevztahuje k uzavřeným hypotézám, ale k otevřeným exploračním cyklům, které reflektují jak hodnotu výsledku, tak procesu, který k němu vedl.

5. RtD umožňuje vícevrstevnaté zapojení stakeholderů.
   – Propojuje participaci v návrhu s participací v evaluaci.
   – Uživatelé nejsou pouze „respondenti“ ani „uživatelé řešení“, ale spolutvůrci poznání.
   – Vzniká tak model evaluace, který není na design jen napojen, ale je v něm strukturálně zakotven.

Metodologické implikace

• Každá iterace prototypu generuje předpoklady, které lze zpětně testovat: jaké změny nastaly, proč, za jakých podmínek.

• Evaluátor musí být součástí návrhového týmu; ne jako kontrolor, ale jako facilitátor učení.

• Záznamový aparát musí zahrnovat nejen výsledky, ale i rozhodovací dilemata, neúspěchy a alternativy, které byly opuštěny.

• Reflexivní dokumentace (journaling, sdílené záznamy, insight harvesting) se stává součástí datové báze evaluace.

• Smyslem není ověření konečné hypotézy, ale vytváření přenositelných, kontextově ukotvených poznatků – tzv. „design knowledge“.

Shrnutí

Research through Design poskytuje metodologický rámec, který:

• propojuje tvorbu a evaluaci v jediném iterativním procesu,

• umožňuje formulaci a ověřování programové teorie v reálném čase,

• podporuje učení v komplexních, adaptivních systémech,

• legitimizuje prototyp jako poznávací i evaluační jednotku.

Jeho využití v pilotních veřejných politikách a sociálních inovacích otevírá cestu k metodologicky konzistentnímu přístupu, který nepodřizuje evaluaci designu ani design evaluaci, ale vytváří třetí rámec, který kombinuje silné stránky obou.

Shrnutí klíčových pojmů a metod

• Teorie programu (program theory) – Souhrn předpokladů, jak a proč má intervence fungovat. Zahrnuje teorii změny (mechanismus vedoucí k cílům) a teorii akce (praktickou realizaci intervence).

• Teoreticky řízená evaluace (Theory-Driven Evaluation) – Přístup k evaluaci, který využívá teorii programu jako rámec pro návrh evaluace, sběr dat i interpretaci výsledků. Umožňuje zjistit, zda program funguje podle plánu a proč (či proč ne). Pomáhá odhalit chyby v kauzálních předpokladech nebo implementaci a přispívá k učení a vylepšení programu.

• Design thinking – Iterativní human-centered proces inovace sestávající z pěti fází: Empatie, Definice, Ideace, Prototyp, Test. Vede k tvorbě a ověření nových řešení skrze rychlé cykly zpětné vazby. Klíčové principy: hluboké porozumění uživateli, kreativní generování nápadů, rychlé prototypování a testování v praxi, ochota poučit se z nezdarů.

• Pragmatická evaluace – Označuje evaluační přístupy orientované na užitečnost a praxi. Charakteristické rysy: důraz na využití výsledků (utilization-focused), metodologický pluralismus (volba metod podle účelu, často kombinace kval. a kvant. přístupů) a adaptivní evaluace (např. vývojová evaluace podporující průběžné rozhodování v komplexních projektech).

• Vývojová evaluace (Developmental Evaluation) – Typ pragmatické evaluace vhodný pro inovace v komplexních systémech. Evaluátor je součástí týmu, průběžně sbírá data a pomáhá adaptovat projekt v reakci na průběžné poznatky. Podporuje iterativní učení a rychlé úpravy kurzu místo pevného přidržení se původního plánu.

• Akční model / Změnový model (Action/Change model) – Pojmy zavedené H. T. Chenem pro dvě složky programové teorie. Akční model popisuje operační stránku programu (kdo, co, jak dělá), Změnový model kauzální stránku (jaké mechanismy vedou k výsledkům). Jasné rozlišení těchto složek pomáhá při designu i evaluaci programu – můžeme sledovat zvlášť kvalitu implementace a platnost teoretických předpokladů.

• Prototypování – V kontextu politik a sociálních intervencí jde o zkoušení návrhu v malém měřítku nebo na krátký čas s cílem získat levně a rychle zpětnou vazbu. Prototyp nemusí být jen “věc”, může jít o pilotní projekt. Důležitý je přístup testuj a uč se: prototyp se vyladí nebo zahodí na základě zjištění z testování, což informuje další postup.

• Komplexní systém – Systém s mnoha vzájemně provázanými částmi, nelineárními vztahy a emergentním chováním. V takovém prostředí drobná změna může mít nečekané důsledky a nelze přesně předvídat vývoj. Evaluace v komplexitě vyžaduje adaptivní přístup, sledování trendů v čase a často kvalitativní porozumění dynamice (tzv. complexity-aware evaluation).

Doporučení pro praktickou aplikaci

Na základě výše uvedeného nabízím několik doporučení, jak integrovaný přístup uplatnit při evaluaci pilotních inovací a prototypování politik:

• Zapojte uživatele hned na začátku: Při plánování pilotu využijte metody design thinking (rozhovory, fokusní skupiny, empatické mapy) k pochopení potřeb cílové skupiny. Tyto poznatky pak převeďte do jasné teorie programu. Prakticky: uspořádejte například design workshop se stakeholdery, kde společně nakreslíte “teorii změny” na základě reálných příběhů uživatelů.

• Formulujte hypotézy a neznámé: Před spuštěním pilotu si explicitně sepište klíčové předpoklady (“věříme, že X povede k Y, protože Z”) a také oblasti nejistoty (“nevíme, zda A bude schopno B”). Tyto body pak definují učební agendu pilotu – evaluace by měla být nastavena tak, aby právě tyto hypotézy otestovala.

• Plánujte malé cykly a milníky: Namísto jedné závěrečné evaluace naplánujte sérii iterací. Např. pilot rozdělte na několik fází (třeba kvartálně) a po každé fázi proveďte minievaluaci – seberte data, vyhodnoťte, co funguje, co ne, a proveďte úpravy designu do další fáze. Tyto cykly “akce–reflexe–akce” jsou srdcem agilního učení.

• Kombinujte metody chytře: Nebojte se smíchat různé druhy evaluace. Můžete zároveň měřit tvrdá data (např. indikátor: kolik % účastníků našlo práci) a dělat hlubší kvalitativní sondy (rozhovory s účastníky, proč si myslí, že uspěli či neuspěli). Kvantitativní data dají přehled “co se děje”, kvalitativní “proč se to děje” – obojí je pro učení zásadní.

• Udržujte teorii změny “živou”: Aktualizujte si průběžně váš logický rámec nebo teorii změny, jakmile získáte nové poznatky. Pokud zjistíte nový zprostředkující faktor úspěchu, doplňte ho do modelu; když se ukáže, že některý předpoklad byl mylný, nahraďte ho novým. Sdílejte aktualizovaný model s týmem – pomůže to všem pochopit, jak se projekt vyvíjí.

• Zajistěte rychlou zpětnou vazbu rozhodovatelům: Pokud jste najati jako evaluátor pilotu, sjednejte si s manažery či donory, že je budete informovat průběžně (např. měsíční reporty, dashboard, prezentace). Nečekejte až na závěr s kompletní zprávou – v rychlém pilotování může být závěrečná zpráva “pozítří pozdě”. Raději poskytujte postupná doporučení, co zlepšit hned teď.

• Buďte připraveni na změnu kurzu: Kultura pilotních inovací by měla akceptovat, že změna plánu není selhání. Pokud evaluace ukáže, že určitý komponent programu vůbec nefunguje, buďte ochotni ho opustit nebo nahradit jiným. Vytvořte prostředí, kde tým tuto zprávu přijme pozitivně (jako poučení) a ne defenzivně. Tomu pomůže, když klíčoví lidé (sponsor projektu, vedení) jsou od počátku srozuměni s iterativním přístupem a počítají s úpravami.

• Zaměřte se na škálovatelnost od začátku: Pilot by měl nejen ověřit funkčnost v malém, ale také poskytnout poznatky pro případné rozšíření. Sledujte proto i kontextové faktory – co by se muselo změnit, kdyby se program zvětšil? Pragmatický evaluátor v pilotu myslí dopředu: identifikuje potenciální překážky či potřebné zdroje pro škálování a upozorňuje na ně zadavatele.

• Dokumentujte a sdílejte příběh učení: Kromě tvrdých dat si veďte deník učení (tzv. learning journal) projektu. Zaznamenávejte klíčové momenty, kdy jste změnili směr, a proč – co k tomu vedlo z evaluace. Tyto příběhy pak využijete při komunikaci s širšími stakeholdery (např. politickými činiteli) – pomohou vysvětlit, proč má prototyp smysl, co jste se dozvěděli a jak to obhajuje další investice.

Případové studie z praxe

Případová studie 1: Inovační laboratoř ESDC – spojení design thinking a rychlé evaluace v kanadské politice zaměstnanosti

Kanadská laboratoř pro inovace (ESDC Innovation Lab) při Ministerstvu zaměstnanosti a sociálního rozvoje otestovala unikátní kombinaci designového a evaluačního přístupu při revizi jednoho z dotačních programů. Jejich cílem bylo zlepšit, jak program odpovídá potřebám občanů, a zároveň získat důkazy o dopadech navrhovaných změn. Propojili proto design thinking s metodologií Rapid Impact Evaluation (RIE), což je zrychlená evaluační metoda využívající kontrafaktuální uvažování.

Laboratoř nejprve provedla terénní empatickou fázi: zástupci týmu vyjeli do regionů, kde vedli skupinové rozhovory s koncovými uživateli programu. Použili kreativní techniky – např. tzv. emoční spouštěče – aby lidé otevřeně popsali své zkušenosti s programem, co je frustrovalo či motivovalo. Tyto příběhy pak analytici roztřídili do tematických okruhů a nechali výtvarníkem převést do vizuálních map (grafických záznamů), které přehledně ukazovaly uživatelské cesty a bolesti.

Na tomto základě laboratoř zorganizovala dvoufázový co-design workshop. Prvního se účastnila menší skupina (~15 lidí) napříč odbory ministerstva, druhého velká skupina (~80 lidí) včetně různých stakeholderů: úředníků, příjemců dotací, neúspěšných žadatelů, front-line pracovníků, zástupců menšinových komunit, NNO i firem. Složení bylo záměrně rozmanité (genderově, etnicky, věkem 50–80, různé schopnosti) – aby designový proces zahrnul maximum perspektiv cílové populace.

Workshopové aktivity byly šité na míru zjištěním z terénu. Facilitátoři využili např. gamifikaci k otevírání citlivých témat a metodu back-casting (plánování od budoucího ideálního stavu zpět k současnosti) pro definici cílů. Kritickým výstupem bylo, že účastníci společně přehodnotili teorii změny programu – nejprve se vžili do uživatele (empatie), potom nově definovali problém a hledali alternativy (divergentní reframing).

Porovnali současný program s “kontrafaktuálem”, tedy situací, kdy by program neexistoval, a identifikovali mezery a nedostatky stávajícího designu. Pak generovali nápady na vylepšení a testovali je – zkoumali, co by nové nápady znamenaly pro různé skupiny uživatelů a jaké by mohly mít nežádoucí důsledky.

Po workshopech tým analyzoval všechny navržené inovace a pomocí RIE metodologie je vyhodnotil z hlediska dopadu: pro každý nápad se odhadoval potenciální přínos (pravděpodobnost a velikost efektu) i rizika.

Vznikl tak iterativní evaluační proces, kde designové fáze plynule přecházely v evaluační a naopak – návrhy se hned posuzovaly evidence-based pohledem. Laboratoř uvedla, že pětifázový model design thinking mapovali proti pěti krokům RIE a “oba přístupy se dobře promísily”.

Výsledkem bylo zavedení uživatelsky vstřícnějších změn programu a zároveň nové “důkazy” pro evaluaci – například se ukázalo, že určitá menšinová skupina je dosavadním designem nechtěně vylučována, což by bez této kombinované metody nevyšlo najevo. Tento případ ukazuje sílu integrace: design thinking přinesl inovace a hlas uživatelů, RIE zajistila důkazový rámec a kontrafaktuální myšlení, pragmatický přístup to celé držel pohromadě s ohledem na rozhodovací potřeby ministerstva.

Případová studie 2: Reforma školního kurikula – vývojová evaluace ruku v ruce s designem změn

V kanadské provincii Ontario proběhl pilotní projekt zaměřený na inovaci středoškolského kurikula pomocí metod design thinking, přičemž evaluace byla pojata jako vývojová (developmental) od samého počátku. Cílem bylo vytvořit moderní výukové postupy pro nejistou budoucnost trhu práce, a projekt proto kombinoval společné tvoření inovací (co-creation) pedagogů, studentů a komunit s průběžným vyhodnocováním a úpravami.

Klíčovou roli hrál tým univerzitních evaluátorů, který se stal součástí projektu jako kritický přítel. Hned zkraje pomohl facilitovat design sprint: učitelé a studenti vymýšleli nové výukové přístupy (např. projektové vyučování propojující obory, digitální portfolio dovedností studentů apod.). Tyto nápady se pilotně ověřovaly v několika školách během jednoho školního roku. Evaluátoři nastavili smíšený systém sběru dat – dotazníky měřící zapojení a motivaci studentů, pozorování hodin, fokusní skupiny s učiteli, analýzu studentských výstupů.

Na konci každého trimestru uspořádali reflexní workshop (formát “evaluative inquiry”), kde společně s učiteli vyhodnotili, co se daří a co ne. Na základě dat třeba zjistili, že zatímco většina studentů je z nových projektů nadšená, určité skupině (např. introverti) nevyhovuje výhradně skupinová práce. Tým proto navrhl do dalšího trimestru upravit aktivity tak, aby bylo více prostoru pro individuální reflexi – okamžitá iterace designu na základě evaluace.

Tento cyklus se několikrát zopakoval. Design thinking zajistil, že inovace byly spolu-vytvářeny a testovány v terénu, zatímco developmental evaluation poskytla strukturu pro učení ze zkušenosti v reálném čase. Kurucz a kol. (2025) uvádějí, že design thinking a vývojová evaluace se ukázaly jako nové strategie pro implementaci školských reforem – umožnily průběžně vyhodnocovat a modifikovat zaváděné kurikulum. Tato kombinace vedla k tzv. collaborative educational re-imagining, tedy společnému přetváření vzdělávání tak, aby lépe odpovídalo jak individuálním potřebám žáků, tak širším společenským požadavkům (např. rozvoj kreativního myšlení pro 21. století). Díky vývojové evaluaci měli výzkumníci, pedagogové i tvůrci politik nové možnosti, jak hodnotit a průběžně upravovat curriculum. Zajímavým zjištěním také bylo, že při plánování rozšíření reforem na další školy bylo nutné brát v potaz faktory jako hloubka změny, udržitelnost, rozšíření a převzetí ownershipu ze strany dalších učitelů – a právě na tyto dimenze evaluátoři upozorňovali (tzv. scaling principles).