V krizi smisla tiči misel






         

25.12.2016

Vrednotenje ekonomskih učinkov kulturnih dogodkov – nova metoda

Ob novem letu je prav pogledati tudi, kaj ga je najbolj zaznamovalo. Vsaj zame zagotovo kar malce nepričakovan dvig metode ex-post ekonometrične verifikacije kot nove metode vrednotenja ekonomskih učinkov kulturnih dogodkov. Metoda, ki smo jo sami pričeli uporabljati pri ocenjevanju ekonomskih učinkov EPK Maribor 2012, in je potem kar nekaj časa “samevala”, je pričela “migati” v lanskem letu, dokončno pa se je pričela prebijati v zanimanje strokovne javnosti v tem letu.

Vse skupaj terja malce kronologije. Tema mojega magisterija na Fakulteti za družbene vede v Ljubljani je bila ekonomsko vrednotenje kulturnih dogodkov (kasneje je magisterij v knjižni obliki izdala Založba FDV). V magisteriju sem tedaj predstavil vse različne metodologije, ki so obstajale na področju, s posebnim ozirom na razkol med uporabo input-output metodologije (t.i. ekonomskimi impaktnimi študijami) in kontingenčno vrednotno metodologije. Podobno kot večina kulturne ekonomike sem se tedaj zavzel za večjo uporabo slednje pri vrednotenju kulturnih dogodkov. Iskreno rečeno pa mi tema “ni dala spati” in sem slutil, da v tedanji argumentaciji zevajo večje luknje.

Ko sem se vrnil z enoletnega študijskega bivanja v ZDA, me je Bogomir Kovač povabil k pripravi študije ekonomskih učinkov Evropske prestolnice kulture Maribor 2012. Sredi 2012, takoj, ko sem se vrnil, smo v okviru EPK pripravili tudi mednarodno konferenco o razvojnih potencialih kulture, kjer so bili prisotni tako rekoč vsi, ki s tega področja kaj pomenijo v svetovnem merilu: v prvi meri legenda tega področja, Bruce Alan Seaman, s katerim sem še danes v stiku. Bistveni del: v svoji predstavitvi je Seaman že takrat nakazal potencial nove metode ex-post ekonometrične verifikacije, ki je nihče v kulturni ekonomiki doslej ni uporabljal.

Ko smo torej po tem, v jesenskih mesecih 2012 razmišljali, kako se lotiti študije v Mariboru, je prišel preblisk. Med vožnjo z vlakom do Maribora, kjer smo imeli takrat sestanek, sem se malce nerad lotil teme sestanka – bomo pač naredili neko kombinacijo impaktne in kontingenčne študije, sem si dejal. Bo že kako… In potem sunek: kaj pa če bi uporabili podatke SURS in treatment effects metode? Primerjali dejanske statistične učinke po občinah? Odlično! In potem misel: pa zakaj za vraga tega ne delajo tudi v drugih študijah, v drugih primerih? Saj to je vendar najbolj pisano na kožo temu problemu – merjenju ekonomskih učinkov kulturnih dogodkov…

Dobro, ostalo je zdaj že preteklost, v Mariboru smo to uporabili, s tedaj še precej elementarno ekonometrično osnovo, zato tega kar dolgo nisem hotel spraviti v objavo. Uporabili smo vse tri metode, ekonomsko impaktno študijo, ex-post verifikacijo in kontingenčno metodo. Še danes vsi tisti, ki hočejo kazati na velike ekonomske učinke dogodka, navajajo le impaktno študijo, tisti, ki ga hočejo kritizirati, pa ex-post verifikacijo. Vsakemu svoje, alias sto ljudi, sto čudi.

Da malo skrajšam: metodo sva obudila v letu 2014 s kolegico dr. Renato Slabe-Erker in jo kasneje uporabila na primeru ekonomskih učinkov EuroBasketa2013 v Sloveniji. Z njeno uporabo sva prijavila tudi članek o ekonomskih učinkih beneških karnevalov na takratni odprti poziv za mednarodno monografijo Carnival, Culture and Tourism (po vseh peripetijah bo naposled zunaj v začetku 2017 pri eni vodilnih založb s področja turizma, CABI). Bila sva sprejeta, rok za članek pa smo imeli jeseni 2015. K sodelovanju sva povabila še mojo tesno sodelavko prof. dr. Marileno Vecco, ki je skoraj 10 let živela in predavala v Benetkah.

Izšlo se je odlično, rezultate članka kratko predstavljam v nadaljevanju. Ko je na Facebook profilu ACEI v začetku 2016 stekla debata o novih metodah merjenja ekonomskih učinkov kulture, sem jim sam posredoval te članke (mariborskega, beneškega, EuroBasket). Članke je dobila Jen Snowball, ki je prav tako predavala na mariborski konferenci, in tako se je vednost malce razširila. Beneški članek smo predstavili na osrednji ACEI konferenci v Valladolidu, o njem sta veliko “glasin” razširila Jen in Seaman in prišlo je nekaj največjih na področju, denimo Victor Ginsburgh. Vzdušje je bilo malce mučno, predstavitev ni najbolje uspela, vseeno pa je bilo dovolj, da se je delo nadaljevalo. V mesecu po konferenci sva z Marileno naposled zaključila in oddala še članek o učinkih EPK Maribor 2012, sedaj že sprejet v Journal of Cultural Economics; vmes je bil sprejet še en članek z uporabo te metode na primerih dveh slovenskih jazz festivalov Jazz Cerkno in Jazzinty, ki bo objavljen v januarju 2017 v European Planning Studies. V postopku dogovora je ex-post ekonometrična študija EPK Aarhus 2017, v dogovorih je seminar na IMT Lucca, v postopkih dogovorov je tudi študija učinkov festivalov na Dunaju. Kjerkoli smo kasneje (po Valladolidu) predstavljali članek s to metodo, smo dobili dokaj enoten, večkrat ponovljen odziv: ta metoda je to, kar področje kulturne ekonomike trenutno najbolj potrebuje. In to je seveda odlično izhodišče za oba z Marileno, ki sva sedaj nekako proponenta te metode.

Opišimo najprej v kratkem, o čem je v metodi sploh govora in kje so njene prednosti in slabosti. Najprej, kje je problem obstoječih metod? Impaktne študije prinašajo napačne številke. Čeprav se jih velikokrat označuje kot “najpogostejšo obliko raziskav na področju umetnosti in kulture” (glej denimo Sterngold, 2004), pa so velikokrat bolj poskusi “arts people” (kot jih imenuje Frey, 2005), da bi širšo javnost, predvsem pa financerje “ozavestili” (bom rekel kar direktno: nategnili…) o ekonomskem pomenu lastnega dogodka. Višja kot je številka, bolje je (lažje je prepričevati)…

Na drugi strani je metoda kontingenčnega vrednotenja kot bolj “blagozvočna” in politično korektna: vrednoti namreč “intangible” vrednosti kulture. Kaj lepšega, mar ne? Bom še enkrat več neposreden: kaj lepšega za še en nateg “strokovne”, predvsem pa kulturniške javnosti… Ponovno gre namreč za metodo, ki ima velike, neizogibne probleme. Gre za anketno metodo, kjer se respondente sprašuje po največjem plačilu, ki bi ga bili pripravljeni odšteti za spremembo v ravni neke javne dobrine, povedano zelo v grobem in kratkem. Razumljivo: ti respondenti lahko odgovorijo načeloma karkoli, in večinoma tudi kontingenčne študije prinašajo visoke, lahko bi dejali napihnjene številke. Vendar še bolj nerodno: povsem se izognejo osnovnemu vprašanju – kakšni so (bili) učinki dogodka na ustvarjene prihodke, nova delovna mesta, dodatno število turistov, obisk kulturnih prireditev, zbrane davščine, če že hočete? Iskreno bom dejal: mislim, da bodo razprave v naslednjih letih jasneje pokazale, da je pri obsežni razpravi o tej metodi v kulturni ekonomiki preteklih desetletij šlo za odmik od pravih problemov, vseeno odmik, ki je prinesel kar nekaj dodatne vednosti, ki pa žal ni odgovorila na bistvena vprašanja.

Zato je rešitev, ki jo prinaša naša metoda, naslednja. Da bi odgovorili na osnovna vprašanja, na katera pa impaktna metodologija odgovarja pristrano in z napačnimi vrednostmi, uporabimo raje obstoječe statistične podatke, dostopne v registrskih virih, in iz njih skušajmo izluščiti “blip” (kot sta to poimenovala Gergaud in Ginsburgh v članku iz 2013), torej nekakšno sled, ki so jo ti dogodki zapustili v okolju, kjer so potekali. Metoda, ki poskuša storiti kaj takšnega, je bila prvič uporabljena v ekonomiki učinkov športnih dogodkov (Baade in Dye, 1988; 1990), iz določenih razlogov (povezanih z zgornjo kratko razlago) pa je doslej doživela le zelo malo aplikacij na področju kulture, do naših študij dejansko po moji vednosti najdemo le en članek z uporabo takšne metodologije – Sarah Skinner je v članku v Journal of Cultural Economics iz leta 2006 ocenjevala ekonomske učinke nekaterih večjih likovnih razstav v mestecu Jackson, Mississippi.

V trenutnem stanju metode jo lahko razdelimo v dve večji vrsti: a) uporabo modelov panelne ekonometrije, kjer uporabimo kakšno od izpeljank metode difference-in-differences ali drugih metod t.i. program evaluation, da bi ugotovili učinek “tretmaja” (angl. treatment effect) na ekonomske kazalnike v mestu (regiji, državi, itd.) dogodka; takšno metodo smo uporabili na primeru ekonomskih učinkov EPK Maribor 2012, pa tudi učinkov EuroBasket2013 v Sloveniji; b) uporabo modelov časovnih vrst, ki jih lahko uporabljamo predvsem takrat, kadar nam veliko spremenljivk na primerjalni ravni manjka; takšno metodo je uporabila Skinnerjeva, sami pa smo jo uporabili pri oceni ekonomskih učinkov beneškega karnevala in dveh slovenskih jazzovskih festivalov.

Najprej poglejmo, kakšne rezultate je prinesla v primeru EPK Maribor 2012. Osnovni parametri dogodka so verjetno vsem dobro znani – 6 partnerskih mest, Maribor, Murska Sobota, Novo mesto, Ptuj, Slovenj Gradec, Velenje. Dogodek je potekal v letu 2012 in je bil doslej največji kulturni dogodek pri nas, vsaj po obsegu in trajanju. V študiji iz 2013 sva s Kovačem ocenjevala njegove učinke na prihodke podjetij, zaposlenost, mesečne plače, turizem in obisk kulturnih dogodkov. V končnem članku smo ocenjevali predvsem tisto, kar se je pokazalo kot najbolj zanimivo: učinke na turizem in zaposlenost. Prva zanimiva stvar so učinki na turizem – modeli so jasno pokazali, da lahko o zaznavnih učinkih, ki so bili posledica le tega dogodka in ne kakšnih splošnih trendov, gospodarske krize ali drugih dogodkov, govorimo le v Mariboru. Tu smo ocenili, da je zaradi dogodka v mesto prišlo okrog 20,000 dodatnih turistov, od tega nekaj več kot 18,000 tujih. Dodatnih nočitev je bilo (spet ponovno v Mariboru, učinki v nobenem od drugih mest niso bili statistično značilni, v nobeni specifikaciji modelov) nekaj več kot 48,000, od tega prek 46,500 s strani tujih turistov. Učinek, ki smo ga modelirali, je na spodnji sliki viden kot skok v letu 2012.

Ocenjevali smo tudi učinke na zaposlenost. Ti so bili… negativni. Če je projekt pred pričetkom napovedoval ogromno dodatnih delovnih mest in so kreatorji projekta še dolgo po dogodku govorili o pozitivnih učinkih, teh žal v podatkih ni videti. Šele, ko smo bili posebej pozorni na učinke gospodarske krize, smo prišli (le) do okrog 800 delovnih mest, ki jih je leto 2012 odneslo Mariboru (preostalih pet mest je imelo ponovno statistično neznačilne učinke, ko smo upoštevali gospodarsko krizo, vendar bi bili brez upoštevanja tega tudi tu vidni določeni negativni učinki na zaposlenost v letu 2012). Seveda bi bilo absurdno trditi, da je bilo to posledica EPK, vendar ti rezultati pokažejo, da je prav tako absurdno govoriti o tem, da je projekt “premagal” siceršnje probleme mesta – očitno so ostali nekateri močni negativni dejavniki, ki jih nismo uspeli vključiti v model in ki določajo usodo mesta, za katero sami vemo, da ni rožnata. Koristno bi bilo tu iti še naprej v modeliranju in določiti, za katere dejavnike natančno gre.

V primeru Benetk je bilo stanje drugačno. Tu nismo imeli podobno širokih podatkov kot za Maribor (kjer smo lahko uporabili podatke SURS za vse občine v Sloveniji in torej panelno analizo). Dostopni so bili le podatki za regijo Veneto; Italijo v splošnem; ter podatki beneških statistik. Zato smo uporabili zelo podobno metodologijo kot Skinnerjeva, ki se je pokazala kot primerna, vsaj sodeč po statističnih testih v članku. Modelirali smo le univariatne časovne vrste, torej le po eno spremenljivko, kjer smo najprej s preprostimi OLS regresijami izločili sezonske in ciklične učinke ter nato ocenjevali parametre z ARIMA modeli ter kasneje še z intervencijsko analizo, ki smo jo kasneje uporabili tudi za slovenske jazz festivale. Ocenjevali smo učinke na število turistov – njihove prihode, nočitve, vožnje z vaporetti in letalske prevoze; ter zaposlenost v regiji.

V spodnji sliki sta vidni osnovni časovni vrsti, ki smo jih ocenjevali – število prihodov turistov in njihovih nočitev. Kar smo ocenjevali, je majhen “spike”, torej dvig v februarju vsakega leta, torej v mesecu, v katerem v največji meri poteka karneval. Izkazalo se je, da je modeliranje dalo kar robustne in statistično močne rezultate. Ocenili smo, da karneval v Benetkah prinaša vsako leto približno 50,000 dodatnih prihodov turistov in približno 170,000 dodatnih nočitev. Prav tako tudi okrog 20,000 dodatnih potnikov na vaporettih. Največji učinki glede vsega tega so bili v februarju leta 2011, ko smo zabeležili tudi edini statistično značilen padec v stopnji brezposelnosti v regiji Veneto za 1.21 odstotne točke, ki ga je očitno pripisati v veliki meri učinkom karneval. Iz tega je bilo precej enostavno oceniti tudi učinke na skupne dodatne prihodke v mestu, nastale v največji meri kot posledica karnevala, v letu 2012 so ti znašali okrog 58 milijonov evrov.

Zadnji primer, ki ga imamo trenutno “na voljo”, so učinki dveh slovenskih jazz festivalov, Jazz Cerkno in Jazzinty Novo mesto v letih 2008-2015. Šlo je za članek, ki je bil v osnovi prijavljen v tematsko številko revije European Planning Studies o odpornosti (angl. resilience) mest in prispevku umetniških dogodkov k temu. Tu smo imeli to srečo, da smo imeli pravzaprav na voljo obe metodološki možnosti: lahko bi uporabili analizo panelnih podatkov, saj smo ponovno imeli (mesečne) podatke o turizmu za dobršen del slovenskih občin (preko SURS), lahko pa smo uporabili tudi metode časovnih vrst, enake kot v primeru Benetk. V primeru Cerkna tu ni bilo problemov, saj sta tam po naši vednosti le dva večja vsakoletna “dogodka”: smučarski del sezone, kjer je v spodnji sliki viden tudi največji skok v turizmu, ter festival, ki poteka v mesecu maju – lepo je viden tudi manjši skok glede tega, ki smo ga ocenjevali. V primeru Novega mesta smo tu imeli nekaj več težav, da smo v mesecu avgustu, ko poteka Jazzinty, izločili učinke festivala.

V Cerknem smo tako ocenili učinke festivala v “najboljših” letih, 2008-2010, na 300-1000 novih obiskovalcev, med katerimi je bilo okrog 200-600 tujcev. Dodatnih nočitev je bilo med 1,000-5,000, od tega 600-3,000 s strani tujih obiskovalcev. Manjši učinki so bili vidni v Novem mestu, kjer smo ocenili le okrog 200 dodatnih obiskovalcev zaradi festivala, vsaj v letih 2008-2010, ogromna večina teh je bila tujih, dodatnih nočitev pa okrog 1,000. Določeni pozitivni učinki so bili tudi na zaposlenost, v rangu 20-100 dodatnih delovnih mest, v obeh mestih je bilo to vidno v letih 2008-2010, v Cerknem še kasneje v letu 2014, v Novem mestu pa v letu 2012.

Zadnja stvar, ki jo prikazujem, je še vzdržnost takšnih učinkov v primeru dveh jazz festivalov. V zgornji vrsti so ti učinki za Jazz Cerkno, v spodnji za Jazzinty Novo mesto, po vrsti so grafi naslednji: levo – na skupne prihode turistov; na sredi – na njihove nočitve; na desni – na zaposlenost. Vidimo, da so bili (za razliko od Benetk, kjer rezultatov sicer ne prikazujemo) ti učinki kar vzdržni, zlasti to velja za zaposlenost. Velja pa podobno, kot pri predhodnih ugotovitvah: učinki, ki smo jih opisali, torej v letih 2008-2010, in kasneje pri Cerknem v 2014, pri Novem mestu pa v 2012 in 2015, so bili dokaj vzdržni, tudi zato smo v članku ocenili prispevek obeh festivalov k vzdržnosti in odpornosti obeh mest kot pozitiven.

Kaj reči za konec? Upam, da vam bo to v kratek, vendar dovolj podroben opis tega, kar se je v zadnjih letih dogajalo. Metoda se pričenja razvijati, čeprav je kolikor vem zaenkrat omejena na aplikacije znotraj “mojega” raziskovalnega kroga. Verjetno bodo šele prve resnejše objave, ki bodo prišle v 2017 (za vse tri članke) razširile razpravo in uporabo te metode. Običajno navedemo, da ima metoda naslednje glavne prednosti: a) operira z dejanskimi statističnimi podatki, ključni izziv pa je, ali si zmožen izpeljati ekonometrijo in statistiko dovolj dobro, da prideš do robustnih in korektnih ocen; b) nima posebnih velikih stroškov – potrebuješ sicer nekoga, ki jo zna izvesti, sami podatki, s katerimi operiraš, pa so praviloma predmet zbiranja državnih statističnih uradov in so javno dostopni; c) omogoča primerjavo posameznih dogodkov; d) z njo je možno ugotavljati, kateri dejavniki vplivajo na določen učinek. Največja prednost pa je seveda v tem, da z njo po dolgih desetletjih brezplodnih polemik, ali so boljše impaktne študije s strani “arts people” ali kontingenčno vrednotenje s strani “arts economists”, dobivamo metodo, ki je zmožna odgovoriti na večino vprašanj o ekonomskih učinkih kulturnih dogodkov. Nadaljnja leta pa bodo pokazala, ali smo pri tem šli v pravi smeri in ali bo metoda izpolnila to, kar sedaj obljublja.

Uporabljene reference:
Baade, R.A., in Dye, R.F. (1988). Sports stadiums and area development: a critical view. Economic Development Quarterly 2(3), 265-275.
Baade, R.A., in Dye, R.F. (1990). The Impact of Stadium and Professional Sports on Metropolitan Area Development. Growth and Change 21(2), 1-14.
Frey, B.S. (2005). What Values Should Count in the Arts? The Tension between Economic Effects and Cultural Value. CREMA Working Paper Series, Center for Research in Economics, Management and the Arts (CREMA).
Gergaud, O., in Ginsburgh, V. (2013). Measuring the economic effects of cultural events with special emphasis on music festivals. ULB Institutional Repository, ULB – Universite Libre de Bruxelles.
Skinner, S.J. (2006). Estimating the real growth effects of blockbuster art exhibits: a time series approach. Journal of Cultural Economics, 30, 109-125.
Sterngold, A. (2004). Do Economic Impact Studies Misrepresent the Benefits of Arts and Cultural Organizations? The Journal of Arts Management, Law, and Society, 34(3), 166-187.

  • Share/Bookmark

17.06.2014

Public Budgets for Culture in the EU During Financial Crisis: An Econometric Perspective

Tale članek bo drug teden predstavljen v Montrealu na osrednji konferenci združenja kulturnih ekonomistov ACEI.

Tole je angleški povzetek. Ko bo kaj več časa, morda napišem še kaj več na to temo.

The article analyses whether EU countries use similar cultural financing strategies during crisis as they use in economically successful years. To provide an answer to the question we evaluate the following main hypothesis: “Effects of the financial crisis were reflected in the cuts in general, central and local budgets for culture.” To estimate it we use methods from multivariate analysis (hierarchical and K-means clustering, principal components analysis), and panel data regression analysis (static and dynamic models). Due to the endogenous (reverse-causal) nature of relationship between central and local budgets in culture that has so far not been modelled, explained and econometrically tested, we also use panel VAR methodology to resolve and estimate the consequences of this relationship. We use dataset from Eurostat according to COFOG methodology. It has to be noted that this is one of the first (or perhaps the first) econometric analyses of public budgets for culture and their determinants in the EU and in general.

We are able to establish three main findings: 1) during the period 2008-2011 in 13 studied European countries cuts in cultural budgets as measured from deviations to the trend were present on both central as well as local level (somewhat contrary to what was established by previous study of Čopič et al., 2013); 2) the patterns of cuts in the cultural budgets have not always followed cultural policy characteristics of the studied countries; 3) there indeed exists a reverse-causal relationship among central and local cultural budgets – raising the central cultural budget will also raise the local cultural budgets, while, on the other hand, raising of the local cultural budgets will have minor if not negative effects on the level of central cultural budget. This has important policy consequences and has to be verified and tested in future empirical studies.

P.S.: Powerpoint predstavitev z nekaj najnovejšimi korekcijami in dopolnili najdete tukaj.

  • Share/Bookmark

27.04.2014

Novosti – junijska številka JEcon

Tukaj je še obljubljena kratka predstavitev tekoče, junijske številke Journal of Econometrics:

- Betina Berghaus, Axel Bucher: Nonparametric tests for tail monotonicity. Avtorja predstavljata nove oblike (neparametričnih) testov za preverjanje “monotonosti v repih” (tail monotonicity), ki je šibkejša oblika odvisnosti med dvema spremenljivkama.
- Geert Mesters, Siem Jan Koopman: Generalized Dynamic Panel Data Models with Random Effects for Cross-Section and Time. Nova metoda, temelječa na metodi največjega verjetja in Monte Carlo simulaciji, za ocenjevanje parametrov v nelinearnih dinamičnih panelnih modelih z časovnimi in enotskimi naključnimi učinki.
- Graham Elliott, Ulrich K. Müller: Pre and Post Break Parameter Inference. Avtorja razvijata novo obliko testov za preverjanje strukturnega preloma v časovnih vrstah, ki bodo imeli optimalno velikost (size; obstoječi testi so “preveliki” oz. oversized) in moč (power) preverjanja.
- Joel Horowitz: Adaptive nonparametric instrumental variables estimation: empirical choice of the regularisation parameter. Tekst, ki temelji na predhodnem delovnem zvezku Cemmap, predstavlja pa metodo za izbiro regularizacijskega parametra pri neparametričnem ocenjevanju modelov instrumentalnih spremenljivk, slednje namreč vodi v določene probleme z zveznostjo regresijske funkcije.
- Lung-fei Lee, Jihai Yu: Efficient GMM estimation of spatial dynamic panel data models with fixed effects. Prispevek z velikega področja sodobne ekonometrije, o katerem na tem blogu še ni bilo veliko govora: prostorski ekonometriji. Prispevek prinaša GMM metodo za ocenjevanje dinamičnih panelnih modelov v prostorski ekonometriji.
- Hanming Fang, Xun Tang: Inference of bidders’ risk attitudes in ascending auctions with endogenous entry. Prispevek temelji na predhodnem NBER prispevku, predstavlja pa nekaj neparametričnih testov za ocenjevanje nagnjenosti k tveganju pri dražiteljih na posebni obliki dražb z endogenim vstopom (na vstop dražiteljev vplivajo informacije, ki jih pridobijo tekom dražbe).

  • Share/Bookmark

Blog V krizi smisla tiči misel | Zagotavlja SiOL | O Sistemu |