Hur ska vi mäta, utvärdera och sätta ett pris på det vi gör? ”Att mäta nyttan” Hur ska vi mäta, utvärdera och sätta ett pris på det vi gör? Viveca Nyström www.vnab.se

- Hur mycket tid ska man egentligen lägga på det här med utvärdering? - Det beror på hur mycket tid du kan lägga på att göra fel saker… www.vnab.se

Rätt ordning: Mäta det vi gör Sätta ett pris på det vi gör Utvärdera det vi gör www.vnab.se

Ständigt återkommande huvudfrågor i biblioteksvärlden är: Hur nå ut till alla användare? Hur öka användningen och kunskapen om innehållet? Hur göra beslutsfattare medvetna om bibliotekens innehåll och kompetens? www.vnab.se

Mäta det vi gör… Hur nå ut till alla användare? # räckvidd Hur öka användningen och kunskapen om innehållet? # kundens aktivitet # kundens kännedom om innehåll Hur göra beslutsfattare medvetna om bibliotekens innehåll och kompetens? # kännedom # image # legitimitet www.vnab.se

Räckviddsmått Hur nå ut till alla användare? www.vnab.se

Exempel på att mäta räckvidd www.vnab.se

www.vnab.se

Räckvidd – summan av kontakter Bruttoräckvidd – alla kontakter (samma person kan räknas flera gånger) Nettoräckvidd – antal personer Aftonbladet: papperstidningen, mobilappen, webben, tv-sändningen…. Biblioteken: webben, sociala medier, fysiska besök? www.vnab.se

Kundens aktivitet och kännedom om innehållet Hur öka användningen och kunskapen om innehållet? www.vnab.se

Hur öka användningen och kunskapen om innehållet? på sociala medier i traditionell press i bibliotekssystemet i biblioteket övrig interaktion (deltar i arrangemang, kommer med förslag etc) NKI (nöjd kund-index): kan mäta kännedom # kundens aktivitet # kundens kännedom om innehåll www.vnab.se

Kundens kännedom om innehåll… www.vnab.se

Mått på image och legitimitet Hur göra beslutsfattare medvetna om bibliotekens innehåll och kompetens? www.vnab.se

Frågor som mäter legitimitet Angeläget? Överflödigt? Mötesplats? Viktigt för integration och mångfald? Nödvändigt? Viktigt för demokratin? www.vnab.se

Frågor som mäter image Töntigt? Modernt? Gammaldags? Solidariskt? Kreativt? Byråkratiskt? www.vnab.se

Legitimitet www.vnab.se

Image www.vnab.se

Vad går att mäta? Lokalers nyttjande: observation Informationskompetens: stickprov Kvalitet: publikationsanalys (bibliometri, twittrande, bloggande…) Ekonomisk nytta: Cost benefit Kundens uppfattning: enkäter ersätts av sociala medier? Image: attitydundersökningar (SOM-institutet) Läsupplevelse, friskvård etc: intervjuer, läsarundersökningar www.vnab.se

METODER Kundenkäter Intervjuer Workshops Observationer Statistik CBA www.vnab.se

”sprida kännedom om och öka användningen av informations-resurserna” “bygga relationer” ”sprida kännedom om och öka användningen av informations-resurserna” “kreativ mötesplats” ”facilitating knowledge creation” “inspirera till medskapande” ”contribute to a meaningful and informative leisure time” www.vnab.se

Hur formulera relevanta mål för biblioteket? Undvika floskler Visioner eller mätbara mål – vem ansvarar för vad Processkartläggningar: vad gör vi och för vem? SMARTa mål: specifika, mätbara, accepterade, relevanta, tidsatta och gärna innebära en viss ansträngning… www.vnab.se

Processer Marknadsföring, kundservice (stöd) Egen innovation, kompetensutveckling och omvärldsbevakning (stöd) Inköp och redovisning (stöd) Div. administration: PA, tekniktrassel, resor, städa kontoret…(stöd) Produktion / distribution (huvud) www.vnab.se

Sätta ett pris på det vi gör www.vnab.se

Kostnads-/nyttokalkyl Vad kostar processerna? Står kostnaderna för stödprocesserna i rimlig proportion till utfallet (huvudprocessen)? Vad är icke värdeskapande aktiviteter? (har ingen betydelse för utfallet) www.vnab.se

www.vnab.se

Utvärdera det vi gör Kvalitets-/nyttoanalys www.vnab.se

UPPFÖLJNINGSPROCESSEN Mätningar Regelbundet intervall Mål kopplade till mätetal Analys och förbättringsförslag www.vnab.se

Gör vi saker på rätt sätt? Hur ligger vi till kvalitetsmässigt? Uppföljning Utvärdering Gör vi rätt saker? Gör vi saker på rätt sätt? Hur ligger vi till kvalitetsmässigt? Hur ser det ut i omvärlden? Kreativt Krävande Oregelbundet Periodiskt återkommande redovisning Strukturerat Systematiskt Rutinarbete … t ex med hjälp av Balanserade styrkort www.vnab.se

Uppföljning och utvärdering handlar om att hitta mätetal och indikatorer som leder i rätt riktning i relation till frågeställningarna. www.vnab.se

Exempel på mål och mått NYTTA!!! (mål) Syfte med kanalen (soc. medier) Mätetal Fördjupa relationen med kunden (Process: marknadsföring) Uppnå en viss räckvidd Uppmuntra till engagemang # vänner, fans, författare etc # antal postade kommentarer # antal diskussioner # antal dialoger med bibliotekarie Lära av medborgarna (Process: innovation) Hitta viktiga frågor och diskussionsämnen # rangordning # värderingar: positivt eller negativt # användbara förslag Öka användandet av biblioteks-produkter/ - tjänster (Process: huvudprocess) Upptäcka bibliotekets utbud # laddar ner böcker # anmäler sig till aktivitet # skaffar lånekort #...etc Exempel på mål och mått www.vnab.se

Chalmers bibliotek Mål Mätetal Sprida kännedom om informationsresurserna followers, fans, RT användning app antal doktorander som går doktorandkursen Stärka bibliotekets varumärke Procent studenter med lånekort RT sidvisningar, besök på bloggen antal gånger vi synts i media föreläsningsuppdrag externa samarbetsprojet Sprida kännedom om vetenskaplig kommunikation antal sidvisningar blogginlägg om OA, CPL etc. fans med chalmerstillhörighet antal klick på CPL-flöden I appen www.vnab.se

SE-banken Mål Syfte med verktyget Mätetal Fler kontaktytor mot kund Uppnå en viss räckvidd Interaktivitet # vänner, fans, författare… # antal postade kommentarer # antal avhopp # frågor och svar i relation till antal fans, vänner # egna frågor och inlägg Lära av kunderna Hitta viktiga frågor och diskussionsämnen # rangordning # värderingar: positivt eller negativt # användbara förslag Ökad försäljning Upptäcka bankens utbud # nya kunder (som anger kanal där de etablerat kontakt med SEB) #flöde från sociala medier till webbsida www.vnab.se

Nyttoanalys Vad levererar vi? Vad tycker kunderna att vi gör? Vilka mål har vi? www.vnab.se

Nytta för vem? Skattebetalaren (vårdtagaren?) Huvudmannen / bidragsgivare Samhällsnytta (t ex lokalsamhällets) Organisationens personal (bibliotekarier, lärare, forskare) Staten (uppdragsgivaren) …någon annan intressent? www.vnab.se

Vad är det vi gör – processkartläggning   Vad är det vi gör – processkartläggning Vad kostar det vi gör – kostnadskalkyl Hur stor är kundernas nytta av det vi gör – nyttoanalys www.vnab.se