• Ei tuloksia

7. Strada – menetelmä vai ajattelumalli?

7.4 Lopuksi

Tutkimuspilottimme osoittavat, että kompleksisesta muutoksesta on mahdollista

“saada kiinni” ja siitä on mahdollista myös tuottaa päätöksentekoa palvelevaa luotettavaa informaatiota ja avata uusia näkökulmia monimutkaisena hahmottu-vaan tilanteeseen.

Menetelmäkokonaisuuden ilmeisenä haasteena on sen monimutkaisuus. Tilan-teiden tarkastelu edellyttää ehdotetussa muodossa verrattain raskaan menetel-mällisen kokonaisuuden hyödyntämistä. Toisaalta voidaan ajatella, että jos on-gelma tai tilanne on monimutkainen, onko sen yksinkertaistaminen mahdollista hukkaamatta tilanteeseen ja päätöksentekoon olennaisesti vaikuttavia tekijöitä.

Jos tilanne on monimutkainen, sen haltuunotto edellyttää myös vastaavasti komp-leksista ajattelua ja monipuolista menetelmien ja informaation hyödyntämistä.

Muussa tapauksessa saatamme menettää ymmärryksestämme jotakin, millä puo-lestaan saattaa olla ennakoimattomia ja ei-haluttuja seurauksia organisaation tai järjestelmän kehittämisessä (vrt. Laitinen & Stenvall 2012).

Kompleksisuus tuottaa usein myös tilanteita, joita voi luonnehtia “pirullisiksi”.

Tällöin yksinkertaistaminen ei auta ongelman ratkaisussa, eivätkä ratkaisut ole helposti yleistettävissä tilanteesta toiseen. Ratkaisut ovat ainutkertaisia. Lisäksi on

hyvin todennäköistä, että yhtä ainoata oikeata ratkaisua ei ole olemassa, vaan mielekkäistä ratkaisuja tai toimintavaihtoehtoja voi olla useita. (Vartiainen ym.

2013.)

Kun haasteet ovat kuvatun kaltaisia, tulisi pyrkiä tilanteen mahdollisimman mo-nipuoliseen hahmottamiseen, luomaan laaja informaatiopohja ja hyödyntämään

”kollektiivista älykkyyttä” eli osallistamaan relevantteja toimijoita mahdollisimman laajasti tilanteen ratkaisuun. Samalla prosessi sitouttaa toimijoita yhteisesti hah-motettuihin ratkaisuihin. Tämänkaltainen toimintamalli edellyttää myös muutosta johtamistavoissa ja -kulttuurissa. Voidaan puhua esimerkiksi ”systeemijohtajuu-desta” uutena tapana johtaa kuvatunlaisia kompleksisia tilanteita (Senge ym.

2015). Systeemijohtajuus viittaa siihen, että johtajalla tulisi olla kyky luoda tulevai-suussuuntautunut ”yhteisluomisen” prosessi, jossa jokin kollektiivi itseorganisoituu monimutkaisen tilanteen ratkaisemiseksi. Kollektiivinen oppiminen ja laaja infor-maatiopohja lisäävät mahdollisuuksia toteuttaa eri toimijoiden jakamia mielekkäitä ratkaisuja ja vähentävät tarkoittamattomien ja ei-tiedostettujen seurausten toden-näköistä toteutumista. Monimutkaisten ja itseorganisoituvien järjestelmien kehitys-tä ja muutosta on luonnollisesti mahdotonta ennustaa kehitys-täysin. Sen sijaan voimme lisätä mahdollisuuksiamme toimia mielekkäästi ja ennakoida tulevia kehityskulkuja ja toimintavaihtoehtoja hyödyntämällä joustavasti erilaisia menetelmiä ja lisäämäl-lä päätöksenteon pohjana olevaa moniarvoista ja -näkökulmaista informaatiota.

Lähdeluettelo

Adner, R. (2012). The Wide Lens. A New Strategy for Innovation. Portfolio Pen-guin: London.

Ahlqvist, T., Nieminen, M., Tuominen, A. & Auvinen, H. (2012a). Towards strategic management of complex systemic innovation environments: Integrating foresight, assessment, system dynamic modelling and societal embed-ding into a coherent model. In Towards Transformative Governance?

Responses to mission-oriented innovation policy paradigms. Book of Ab-stracts. 2012 EU-Spri Conference. Fraunhofer Institute for Systems and Innovation Research ISI.

Ahlqvist, T., Halonen, M., Eerola, A., Kivisaari, S., Kohl, J., Koivisto, R., Myllyoja, J. & Wessberg, N. (2012b). Systemic transformation, anticipatory culture, and knowledge spaces: constructing organisational capacities in roadmapping projects at VTT Technical Research Centre of Finland.

Technology Analysis & Strategic Management 24, 8, 821–841.

Ahlqvist, T., Valovirta, V. & Loikkanen, T. (2012c). Innovation policy roadmapping as a systemic instrument for forward-looking policy design. Science and Public Policy 39, 178–190.

Antikainen ym. (2013) Vihreän kasvun mahdollisuudet. VN raporttisarja 4/2013.

Argyris, C. (1999). On Organizational Learning. 2nd ed. Blackwell Publishers:

Oxford.

Auvinen, H. & Tuominen, A. (2012). Turvallinen liikennejärjestelmä 2100. Visio.

VTT Technology 5. VTT: Espoo.

Auvinen, H., Ruutu, S., Tuominen, A., Ahlqvist, T. & Oksanen, J. (2015). Process supporting strategic decision-making in systemic transitions: A case study of emission-free transport in cities by 2050. Technological Fore-casting and Social Change..

Banister, D., Stead, D., Steen, P., Åkerman, J., Dreborg, K., Nijkamp, P. & Schlei-cher-Tappeser, R. (2000). European Transport Policy and Sustainable Mobility. Spon: London.

Bass, F. M. (1969). A New Product Growth Model For Consumer Durables. Mana-gement Science 15, 5, 215–227.

Bauman, Z. (1996). Postmodernin lumo. Toimittaneet P.L. Ahponen & T. Cantell, suomentanut J. Vainonen. Vastapaino: Tampere.

Berkhout, F. (2007). Normative expectations in systems innovation. Technology Analysis & Strategic Management 18, 3–4, 299-311.

Bertanlaffy, L. von (1969). General System Theory: Foundations, Development, Applications (Revised Edition). George Braziller: New York.

Bosshardt, M., Ulli-Beer, S., Gassmann, F. & Wokaun, A. (2008). The Effect of Multi-Incentive Policies on the Competition of Drivetrain Technologies. In Proceedings of the 2008 System Dynamics Conference.

http://www.systemdynamics.org/conferences/2008/proceed/papers/BOS SH242.pdf.

Bouza, M., Ulli-Beer, S., Dietrich, P. & Wokaun, A. (2009). Comparison of Possible Transformation Processes in the Automobile Industry. In Proceedings of the Swiss Transport Research Conference STRC.

http://www.strc.ch/conferences/2009/Bouza.pdf.

Bowen, M. G. (1994). System Dynamics, Determinism, and Choice: Toward a Reconsideration of the Image of ‘systems Man’. System Dynamics

Re-view 10, 1, 87–90. doi:10.1002/sdr.4260100106.

http://doi.wiley.com/10.1002/sdr.4260100106.

Burns, T.R. & Flam, H. (1987). The Shaping of Social Organization: Social Rule System Theory with Applications. Sage Publications: London.

Cabrera, D., Colosi, L. & Lobdell, C. (2008). Systems thinking. Evaluation and Program Planning 31, 299–310.

Carlsson, B. & Stankiewicz, R. (1991). On the nature, function, and composition of technological systems. Journal of Evolutionary Economics, 1, 93–118.

Chelimsky, E. (1997). The Coming Transformation in Evaluation. Julkaisussa Chelimsky, E. & Shadish, W. (toim.) Evaluation for 21st century. A hand-book. Sage Publications: Thousand Oaks.

Chen, H. T. (2005). Theory driven evaluation. In S. Mathison (ed.) Encyclopedia of evaluation (pp. 415–419). Sage: Thousand Oaks.

Cohen, M. J. (2010). Destination unknown: Pursuing sustainable mobility in the face of rival societal aspirations. Research Policy, 39, 4, 459–470.

Cousins, B. J. & Earl Lorna, M. (1995). (eds.). Participatory Evaluation in Educa-tion: Studies in Evaluation Use and Organizational Learning. Falmer:

London.

Cozzens, S. & Melkers, J. (1997). Use and Usefulness of Performance Measure-ment in State Science and Technology Programs. Policy Studies Journal, 25, 3, 425–435.

Cronin, M. A., Gonzalez, C. & Sterman, J. D. (2009). Why Don’t Well-Educated Adults Understand Accumulation? A Challenge to Researchers, Educa-tors, and Citizens. Organizational Behavior and Human Decision Pro-cesses 108, 1, 116–130. doi:10.1016/j.obhdp.2008.03.003.

http://linkinghub.elsevier.com/retrieve/pii/S0749597808000447.

Da Costa, O., Warnke, P., Cagnin, C. & Scapolo, F. (2008). The impact of fore-sight on policy-making: Infore-sights from the FORLEARN mutual learning process. Technology Analysis and Strategic Management 20, 369–87.

Dijk, M., Orsato, R. & Kemp, R. (2012). The emergence of an electric mobility trajectory. Energy Policy, 52, 135–145.

Dooley, K. (2002). Simulation Research Methods. Teoksessa A. C. Baum (toim.) The Blackwell Companion to Organizations. Blackwell.

Doz, Y. & Kosonen, M. (2014). Governments for the Future: Building the Strategic and Agile State. SITRA studies 80. Sitra: Helsinki.

Dyehouse, M., Bennett, D., Harbor, J., Childress, A. & Dark, M. (2009). A compar-ison of linear and systems thinking approaches for program evaluation il-lustrated using Indiana Interdisciplinary GK-12. Evaluation and program planning 32, 187–196.

Edler, J. & Georghiou, L. (2007). Public procurement and innovation – Resurrect-ing the demand side. Research Policy, 36, 7, 949–963.

Edquist, C. (2005). Reflections on the systems of innovation approach. Science and public policy 31, 6, 485–489.

EEA, European Environment Agency (2013). A closer look at urban transport.

TERM 2013: transport indicators tracking progress towards environmen-tal targets in Europe. EEA report, No 11/2013.

Eerola, A. & Jørgensen, B.H. (2008). Foresight in Nordic Countries. Kirjassa The Handbook of Technology Foresight, Concepts and Practice. 1st. ed. Ed-ward Elgar: Cheltenham.

Elzen, B., Leeuwis, C. & van Mierlo, B. (2008). Anchorage of Innovations: As-sessing Dutch efforts to use the greenhouse effect as an energy source.

Article submitted to Research Policy. Ladattavissa:

http://www.utwente.nl/bms/steps/research/colloquia_and_seminars/collo quia/bestanden/elzen.pdf

Elzen, B., van Mierlo, B. & Leeuwis, C. (2012). Anchoring of innovations: as-sessing Dutch efforts to harvest energy from glasshouses. Environmental Innovation and Societal Transitions 5, 1–18.

Eoyang, G. & Holladay, R. (2013). Adaptive Action: Leveraging Uncertainty in Your Organization. Stanford University Press: Stanford.

EU2012.dk (2013). Bioeconomy in Action. http://bioeconomy.dk/outcomes.

Euroopan komissio (2011). Valkoinen kirja. Yhtenäistä Euroopan liikennealuetta koskeva etenemissuunnitelma – Kohti kilpailukykyistä ja resurssitehokas-ta liikennejärjestelmää. KOM(2011) 144.

Fahrenkrog, G., Polt, W., Rojo, J., Tubke, A. & Zinöcker, K. (2002). RTD Evalua-tion Toolbox – Assessing the Socio-Economic Impact of RTD-Policies – Strata Project HPV 1 CT 1999 – 00005. European Commission, IPTS Technical Report Series.

Fetterman, D. (2001). The transformation of evaluation into a collaboration: a vision of evaluation in the 21st century. The American Journal of Evalua-tion 22, 3, 381–385.

Flanagan, K., Uyarra, E. & Laranja, M. (2011). Reconceptualising the ‘policy mix’

for innovation. Research Policy, 40, 5, 702–713.

Forrester, J. W. (1961). Industrial Dynamics. Pegasus Communications.

Forrester, J. W. (1980). Information Sources for Modeling the National Economy.

Journal of the American Statistical Association 75, 371, 555–566.

Geels, F. W. (2002). Technological transitions as evolutionary reconfiguration processes: a multi-level perspective and a case-study. Research Policy, 31, 8–9, 1257–1274.

Geels, F. W. (2004). From sectoral systems of innovation to socio-technical sys-tems: Insights about dynamics and change from sociology and institu-tional theory. Research Policy, 33, 6–7, 897–920.

Geels, F. W. (2005). The dynamics of transitions in socio-technical systems: A multi-level analysis of the transition pathway from horse-drawn carriages to automobiles (1860–1930). Technology analysis & Strategic Manage-ment, 17, 4, 445–476.

Geels, F. W. (2007). Feelings of discontent and the promise of middle range theo-ry for STS: Examples from technology dynamics. Science Technology and Human Values, 32, 6, 627–651.

Geels, F. W. (2010). Ontologies, socio-technical transitions (to sustainability), and the multi-level perspective. Research Policy 39, 495–510.

Geels, F. W. (2012). A socio-technical analysis of low-carbon transitions: introduc-ing the multi-level perspective into transport studies. Journal of Transport Geography, 24, 471–482.

Geels, F. W. & Kemp, R. (2007). Dynamics in socio-technical systems: Typology of change processes and contrasting case studies. Technology in Socie-ty, 29, 4, 441–455.

Geels, F. W. & Schot, J. (2007). Typology of sociotechnical transition pathways.

Research Policy, 36, 399–417.

Genus, A. & Coles, A.-M. (2008). Re-thinking the multi-level perspective of techno-logical transitions. Research Policy 37, 9, 1436–1445.

Georghiou, L. & Keenan, M. (2006). Evaluation of national foresight activities:

Assessing rationale, process and impact. Technological Forecasting and Social Change, 73, 761–77.

Giddens, A. (1984). The constitution of society: Outline of the theory of structu-ration. Polity Press: Cambridge.

Glenn, J.C. (1994). The futures wheel. United Nations University: Washington D.C., USA.

Hacking, I. (1999). The Social Construction of What? Harvard University Press:

Cambridge.

Hansson, F. (2006). Organisational use of evaluation. Evaluation, 12, 2, 159–178.

Hay, C. (1999). Crisis and the structural transformation of the state: interrogating the process of change. British Journal of Politics and International Rela-tions, 1, 3, 317–344.

Heiskanen, E., Kivisaari, S., Lovio, R. & Mickwitz, P. (2009). Designed to Travel?

Transition management encounters environmental and innovation policy histories in Finland. Policy Sciences 42, 4, 409–427.

Helbing, D. (2013). Globally networked risks and how to respond. Nature, 497, 51–59.

Herranen, O. (2013). Kiista valtion tuottavuusohjelmasta. Julkaisematon pro gradu tutkielma. Tampereen yliopisto.

Hickman, R. & Banister, D. (2007). Looking over the horizon: Transport and re-duced CO2 emissions in the UK by 2030. Transport Policy, 14, 377–387.

Hietanen, O. (toim.) (2006). Well-Being in the Information Society. Turun kauppa-korkeakoulun julkaisuja. Sarja C-1.

Hildén M., Hallanaro E-L., Karjalainen L. & Järvelä M.(toim.) (2013): Uusi luon-nonvaratalous. Gaudeamus: Helsinki

Honkasalo, A. (2012). Vihreä talous ja vihreät työt. Ekoinnovaatiot ja työperäiset riskitekijät. Suomen ympäristö 22/2012. Ympäristöministeriö: Helsinki.

Hoogma, R., Kemp, R., Schot, J. & Truffer, B. (2002). Experimenting for Sustaina-ble Transport: The Approach of Strategic Niche Management. Spon Press: London.

Hyytinen, K., Konttinen, J., Ahlqvist, T., Pelkonen, A. & Loikkanen, T. (2009).

Ennakoiva vaikuttavuusarviointi innovaatio-ohjelmien strategisessa joh-tamisessa ja tarpeet. Hallinnon tutkimus, 28, 5, 74–93.

IBM (2011). The world’s 4 trillion dollar challenge. Using a system-of-systems approach to build a smarter planet. IBM Global Business Services. Ex-ecutive Report.

Johnson, G. & Scholes, K. (1999). Exploring Corporate Strategy. Prentice Hall Europe: Hemel Hempstead.

Jokinen, A., Juhila, K. & Suoninen, E. (1999). Diskurssianalyysi liikkeessä. Vasta-paino: Tampere.

Jones, P. (2010). Influence of Paradigms on Problem Framing and the Nature of Uncertainty. Prof. Peter Jones, Centre for transport studies, UCL.

Presentation at Helsinki Summer School of Transportation 2010.

Kahneman, D. & Klein, G. (2009). Conditions for Intuitive Expertise: a Failure to Disagree. American Psychologist 64, 6, 515–526. doi:10.1037/a0016755.

Kamppinen, M., Kuusi, O. & Söderlund, S. (2003). Tulevaisuudentutkimus. Perus-teet ja sovellukset. Suomen Kirjallisuuden Seuran Toimituksia 896. SKS:

Helsinki.

Keeney, R.L. (1996). Value-focused thinking: Identifying decision opportunities and creating alternatives. European Journal of Operational Research 92, 537–549.

Kellog Foundation (2004). Using logic models to bring together planning, evalua-tion & acevalua-tion logic model development guide. Battle Creek, Michigan.

http:www.wkkf.org/Pubs/Tools/Evaluation/Pub3669.pdf.

Kemp, R., Schot, J. & Hoogma, R. (1998). Regime shifts to sustainability through processes of niche formation: The approach of strategic niche manage-ment. Technology analysis and strategic management 10, 2, 175–196.

Kemp, R., Rip, A. & Schot, J. (2001). Constructing transition paths through the management of niches. Teoksessa Garud, R. & Karnoe, P. (toim.) Path dependence and creation. Lawrence Erlbaum: Mahwah, NJ.

Kivisaari, S. (2001). Kokemuksia vuorovaikutuksesta kehittämistyössä. Juurrutta-minen kokeiluna. Työpapereita – Working Papers: 58 2001. VTT Tekno-logian tutkimuksen ryhmä: Espoo.

Kivisaari, S. (2002). Näkemyksiä kestävää kehitystä tukevan rakennemuutoksen suuntaamisesta. Sytykkeitä: 1. VTT Teknologian tutkimus: Espoo.

Kivisaari, S. & Lovio, R. (2004). Juurruttaminen käyttäjälähtöisen teknologian kehittämisen muotona. Tiedepolitiikka 3, 43–50.

Kivisaari, S., Kortelainen, S. & Saranummi, N. (1999). Innovaatioiden juurruttami-nen terveydenhuollon markkinoille. Digitaalisen median raportti: 7/99.

Teknologian kehittämiskeskus TEKES: Helsinki.

Kivisaari, S., Lovio, R. & Väyrynen, E. (2004). Managing experiments for transi-tion. Teoksessa Elzen, B., Geels, F. & Green, K. (eds.) System Innova-tion and the TransiInnova-tion to Sustainability: Theory, Evidence and Policy.

Edward Elgar Publishing.

Kivisaari, S., Paavola, T., Pyykkö, V. & Saranummi, N. (2007). ProViisikon tulos-ten arviointi. VTT Tiedotteita – Research Notes 2367. VTT: Espoo.

Kivisaari, S., Kokkinen, L., Lehto, J. & Saari, E. (2009). Sosiaali- ja terveydenhuol-lon systeemisen innovaation johtaminen – Kahden tapaustutkimuksen opetuksia. VTT Tiedotteita – Research Notes 2504. VTT: Espoo.

Kivisaari, S., Saari, E., Kokkinen, L., Lehto, J. & Saranummi, N. (2013a). System innovations in the making: Hybrid actors and the challenge of up-scaling.

Technology Analysis & Strategic Management 25, 2, 187–201.

Kivisaari, S., Kohl, J., Tuovinen, J., Ylén, P., Ranta, J. & Leväsluoto, J. (2013b).

Kohti asiakaslähtöisiä hyvinvointipalveluita: Työpaja toimijoista muutok-sen takaajina. Policy Brief II. Kurkiaura-julkaisut 2013. Kurkiaura.

Kivisaari, S., Kohl, J., Tuovinen, J., Ylén, P., Ranta, J. & Leväsluoto, J. (2013c).

Kohti asiakaslähtöisiä hyvinvointipalveluja. Policy Brief III. Kurkiaura-julkaisut 2013. Kurkiaura.

Kivisaari, S., Kohl, J., Tuovinen, J., Ylén, P., Ranta, J. & Leväsluoto, J. (2013d).

Kurkiauran tie käytännöiksi: Strada-hankkeen I työpajan tulosten analyy-si. Kurkiaura-julkaisut 2013. Kurkiaura.

Kivisaari, S., Kohl, J. & Leväsluoto, J. (2014). Systeeminen näkökulma hyvinvoin-tipalveluiden muutokseen. Onko hybriditoimijoille tarvetta? VTT Techno-logy 153. VTT: Espoo.

Knorr Cetina, K. (1999). Epistemic cultures: how the sciences make knowledge.

Harvard University Press: Cambridge.

Kohl, J. (2008). Agoralla – avauksia ympäristöasiantuntijoiden vuorovaikutuspro-sesseista. Janus, 328–333.

Kohl, J., Wessberg, N., Dufva, M. & Kivisaari, S. (2014). Tools and approaches creating shared understanding of systemic change – Reflections on three case studies. Paper to be presented in the 5th International Conference on Sustainability Transitions. Utrecht 27–29.8.2014.

Kuhlmann, S. (2003). Evaluation as a source of ‘Strategic Intelligence’. Teoksessa Shapira, P. & Kuhlmann, S. (eds.) Learning from Science and Technolo-gy Policy Evaluation: Experiences from the United States and Europe.

Edward Elgar: Cheltenham.

Laitinen, I. & Stenvall, J. (2012). Ihminen ja vuorovaikutus muutoksessa – komp-leksisuus ja muutosten hallinta. Teoksessa Pertula, J. & Syväjärvi, A.

(toim.) Johtamisen psykologia. Ihmisten johtaminen muuttuvassa työ-elämässä. PS-kustannus: Jyväskylä.

Lane, D. C. (2001). Rerum Cognoscere Causas: Part I ? How Do the Ideas of System Dynamics Relate to Traditional Social Theories and the Volunta-rism/determinism Debate? System Dynamics Review 17, 2, 97–118.

doi:10.1002/sdr.209.

Lehtilä A., Koljonen T., Airaksinen M., Tuominen P., Järvi T., Laurikko J., Similä L.

& Grandell L. (2014) Low Carbon Finland 2050-platform. Energiajärjes-telmien kehityspolut kohti vähähiilistä yhteiskuntaa. VTT Technology 165.

VTT: Espoo.

Lévesque, B. (2013). Social Innovation in governance and public management systems: toward a new paradigm? Teoksessa Moulaer, F., MacCallum, D., Mehmood, A. & Hamdouch, A. (Eds.) The International Handbook of

Social Innovation. Collective Action, Social Learning and Transdiscipli-nary Research. Edward Elgr: Cheltenham, UK.

Leväsluoto, J. & Kivisaari, S. (2012). Kohti asiakaslähtöisiä sosiaali- ja terveyden-huollon palvelumalleja. VTT Technology 62. VTT: Espoo.

Liikenne- ja viestintäministeriö (2009). Liikenne- ja viestintäministeriön hallin-nonalan ilmastopoliittinen ohjelma 2009–2020. Ohjelmia ja strategioita 2/2009.

Liikenne- ja viestintäministeriö (2012). Kilpailukykyä ja hyvinvointia vastuullisella liikenteellä. Valtioneuvoston liikennepoliittinen selonteko eduskunnalle 2012. Liikenne- ja viestintäministeriön julkaisuja 2012.

Liikenne- ja viestintäministeriö (2013). Kohti uutta liikennepolitiikkaa. Älyä liiken-teeseen ja viisautta liikkujille. Ohjelmia ja strategioita 1/2013.

Loorbach, D. & Rotmans, J. (2006). Managing Transition for Sustainable Devel-opment. Springer.

Loorbach, D. & Rotmans, J. (2010). The practice of transition management: Ex-amples and lessons from four distinct cases. Futures 42, 237–246.

Luhmann, N. (1995). Social Systems. Stanford University Press: Stanford.

Luoma, P., Vanhanen, J. & Tommila, P. (2011). Distributed Bio-Based Economy – Driving Sustainable Growth. Sitra: Helsinki.

Lähteenmäki-Smith, K., Hyytinen, K., Kutinlahti, P. & Konttinen, J. (2006). Re-search with an impact. Evaluation practises in public reRe-search organisa-tions. VTT Research Notes 2336. VTT: Espoo.

Maier, F. H. (1998). New Product Diffusion Models in Innovation Management – A System Dynamics Perspective. System Dynamics Review 14, 4, 285–

308.

Malaska, P. (2003). Tulevaisuustietoisuus ja tulevaisuuteen tunkeutuminen. Teok-sessa Vapaavuori, M. & von Bruun, S. (toim.) Miten tutkimme tulevai-suutta. Tulevaisuuden tutkimuksen seura: Tampere.

Manninen J., Nieminen-Sundell R. & Belloni K. (2014) People in the Bioeconomy 2044. Sustainability, closed circles, and use of biomass woven into solu-tions. VTT VISIONS 4. VTT: Espoo.

Mantere, S., Suominen, K. & Vaara, E. (2011). (toim.) Toisinajattelua strategisesta johtamisesta. WSOY: Helsinki.

Markard, J. & Truffer, B. (2008). Technological innovation systems and the multi-level perspective: Towards an integrated framework. Research Policy, 37, 4, 596–615.

Mayers, J. & Vermeulen, S. (2005). Stakeholder influence mapping. Power tools series. International Institute for Environment and Development: London, UK.

Mayne, J. (2012). Contribution analysis: Coming of age? Evaluation, 18, 270–280.

Milling, P. M. (2002). Understanding and Managing Innovation Processes. System Dynamics Review 18, 1, 73–86.

Mitchell, R. K., Angle, B.R. & Wood, D.J. (1997). Toward a Theory of stakeholder identification and salience: defining the principle of who and what really counts. Academy of Management Review 22, 853–886.

Mitleton-Kelly, E. (ed.) (2007). Complex systems and evolutionary perspectives on organizations. The application of complexity theory to organizations. Em-erald: Bingley, UK.

Nelson, R.R. & Winter, S.G. (1982). An Evolutionary Theory of Economic Change.

The Belknap Press of Harvard University Press: Cambridge, Massachu-setts.

Nieminen, M. (2011). Kompleksiset sosiaaliset järjestelmät ja sosiotekninen muu-tos. Teoksessa Nieminen, M., Valovirta, V. & Pelkonen, A. 2011. Sys-teemiset innovaatiot ja sosiotekninen muutos – Kirjallisuuskatsaus. VTT Tiedotteita – Research Notes 2593. VTT: Espoo.

Nieminen, M. & Kivisaari, S. (2012). Julkisten palveluiden uudistamisen haaste muuttuvassa kuntaympäristössä: Tapaustutkimus sähköisistä palveluista.

Yhteiskuntapolitiikka 77, 4.

Nonaka, I. (1994). A dynamic theory of organizational knowledge creation. Organ-ization Science 5, 1.

Nonaka, I. & Takeuchi, H. (1995). The Knowledge-Creating Company: How Japa-nese Companies Create the Dynamics of Innovation. Oxford University Press: Oxford.

Nowotny, H., Scott, P. & Gibbons, M. (2001). Re-thinking science: Knowledge and the public in an age of uncertainty. Polity Press: Cambridge.

OECD (2009). The Bioeconomy to 2030. Designing a Policy Agenda. Main Find-ings and Policy Conclusions. OECD: Paris.

Patton, M. Q. (1997). Utilization-Focused Evaluation. The New Century Text, Ed 3.

Sage Publications: London.

Patton, M. Q. (2011). Developmental evaluation: Applying complexity concepts to enhance innovation and use. Guilford: New York.

Pekkarinen, S., Hennala, L., Harmaakorpi, V. & Tura, T. (2011). Clashes as poten-tial for innovation in public service sector reform. International journal of public sector management 24, 6, 507–532.

Posner, K. A. (2010). Stalking the Black Swan: Research and Decision Making in a World of Extreme Volatility. Columbia University Press: New York.

Raven, R. & Verbong, G. (2007). Multi-Regime Interactions in the Dutch Energy Sector: The Case of Combined Heat and Power Technologies in the Netherlands 1970–2000. Technology Analysis & Strategic Management 19, 4, 491–507.

Raven, R.P.J.M. & Verbong, G.P.J. (2009). Boundary crossing innovations: case studies from the energy domain. Technology in Society, 31, 1, 85–93.

Repenning, N. P. (2003). Selling System Dynamics to (other) Social Scientists.

System Dynamics Review 19, 4, 303–327.

Repenning, N. P. & Sterman, J. D. (2002). Capability Traps and Self-Confirming Attribution Errors in the Dynamics of Process Improvement. Administra-tive Science Quarterly 47, 2, 265.

Rip, A. (2003). Societal Challenges for R&D Evaluation. Teoksessa Shapira, P. &

Kuhlmann, S. (eds.) Learning from Science and Technology Policy Eval-uation: Experiences from the United States and Europe. Edward Elgar:

Cheltenham.

Rip, A. & Kemp, R. (1998). Technological change. Teoksessa Rayner, S. &

Malone, E.J. (eds.) Human Choice and Climate Change, vol. 2. Re-sources and Technology. Battelle Press: Columbus Ohio.

Rossi, P.H., Freeman, H.E. & Lipsey, M.W. (1999). Evaluation. A systematic ap-proach. 6th edition. Sage Publications: Thousand Oaks.

Rotmans, J. & Loorbach, D. (2009). Complexity and transition management. Jour-nal of Industrial Ecology, 13, 2, 184–196.

Saari, J. (2010). Tulevaisuuden voittajat – Hyvinvointivaltion mahdollisuudet Suo-messa. Eduskunnan tulevaisuusvaliokunnan julkaisu 5/2010.

Santos, G., Behrendt, H. & Teytelboymb, A. (2010). Part II: Policy instruments for sustainable road transport. Research in Transportation Economics 28, 1, 46–91.

Schot, J. & Geels, F. W. (2007). Niches in evolutionary theories of technical change. A critical survey of the literature. Journal of Evolutionary Eco-nomics, 17, 605–622.

Senge, P., Hamilton, H. & Kania, J. (2015). The Dawn of System Leadership.

Stanford Social Innovation Review.

http://www.ssireview.org/articles/entry/the_dawn_of_system_leadership Shove, E. & Walker, G. (2007). Commentary. CAUTION! Transitions ahead.

Envi-ronment and Planning A, 39, 763–770.

Shove, E. & Walker, G. (2010). Governing transitions in the sustainability of eve-ryday life. Research Policy, 39, 4, 471–476.

Smith, A. (2007). Translating Sustainabilities between green niches and socio-technical regimes. Technology Analysis & Strategic Management 19, 4, 427–450.

Smith, A., Stirling, A. & Berkhout, F. (2005). The governance of sustainable socio-technical transitions. Research Policy, 34, 10, 1491–1510.

Smith, A., Voss, J-P. and Grin, J. (2010). Innovation studies and sustainability transitions: The allure of the multi-level perspective and its challenges, Research Policy, Vol. 39, pp. 435-448.

Smits, R. & Kuhlmann, S. (2004). The rise of systemic instruments in innovation policy. International Journal of Foresight and Innovation Policy, 1/2, 4–

32.

Smits, R., Kuhlmann, S. & Shapira, P. (eds.) (2010). The Theory and Practice of Innovation Policy: An International Research Handbook. Edward Elgar:

Cheltenham.

Sorasalmi, T., Nieminen-Sundell, R. & Ylén, P. (2013). A Dynamic Analysis of Socio-Technical Transition towards Bio-Economy. In the 31st Interna-tional Conference of the System Dynamics Society. Cambridge, MA, USA.

Stave, K. A. (2002). Using System Dynamics to Improve Public Participation in Environmental Decisions. System Dynamics Review 18, 2, 139–167.

Stave, K. A. (2002). Using System Dynamics to Improve Public Participation in Environmental Decisions. System Dynamics Review 18, 2, 139–167.