Lightmark by Productorystaging
Logi sisse

Kuidas mõõdame

Lightmark paneb inimese, tiimi ja ettevõtte ühele redelile. Siin on kogu meetod — sealhulgas see, mida meetod ei mõõda ja mida nende numbritega teha ei tohi.

Küsimused kõigepealt

Siin on täpselt need küsimused, millele uus vastaja vastab. Igal tasandil on viis valdkonda ja igas valdkonnas kolm küsimust: kaks kirjeldavad tajutud seisu ning üks küsib eraldi, kas puudujääk päriselt tööd takistas.

Inimene: Sinu töö AI-gav8 · 15 küsimustNäita küsimusi

Siin ei määrata ega valita eraldi tööülesannet. Mõtle viimasele 30 päevale ja oma tööle, kus AI kasutamine oli või oleks olnud asjakohane.

Kes vastab: Iga organisatsiooni liige, enda kohta

Inimeste oskused

Otsus: Arenda rollipõhiseid oskusi

  1. SeisKui iseseisvalt saad hakkama?

    Kui iseseisvalt suudad otsustada, millistes oma töödes on AI kasutamine asjakohane, ning sõnastada AI-tööriistale selge tööülesande koos eesmärgi, vajaliku konteksti ja piiridega?

  2. SeisKui iseseisvalt saad hakkama?

    Kui iseseisvalt suudad enne kasutamist kontrollida AI tulemuse õigsust, täielikkust ja sobivust oma töö jaoks?

  3. PidurKui tugevalt see puudujääk takistas?

    Kui tugevalt takistas oskuste või kogemuse puudujääk sul viimase 30 päeva jooksul asjakohast tööd AI abil teha?

Tööriistad

Otsus: Paranda tööriistu, ligipääse või integratsioone

  1. SeisKui suures osas juhtudest see toimib?

    Kui sageli on sul oma asjakohastes tööülesannetes abi organisatsioonis lubatud AI-tööriistadest?

  2. SeisKui suures osas juhtudest see toimib?

    Kui sageli piisas AI-tööriista(de) funktsioonidest, töökindlusest ja ühendustest, et teha enda asjakohast põhitööd?

  3. PidurKui tugevalt see puudujääk takistas?

    Kui tugevalt takistas AI-tööriista puudumine või selle funktsionaalsuste ja ühenduste puudujääk sul viimase 30 päeva jooksul asjakohast tööd teha?

Andmed

Otsus: Paranda andmeid, nende kasutusõigust, ligipääsuteed või andmejuhtimist

  1. SeisKui suures osas juhtudest see toimib?

    Kui sageli olid sinu AI abil tehtavaks tööks vajalikud organisatsiooni andmed leitavad, piisavalt täielikud, õiged ja ajakohased?

  2. SeisKui suures osas juhtudest see toimib?

    Kui sageli jõudsid tööks vajalikud organisatsiooni andmed lubatud viisil sinu kasutatava AI-tööriistani — toimiva ühenduse kaudu või nii, et sul oli selge luba vajalik info tööriistale anda?

  3. PidurKui tugevalt see puudujääk takistas?

    Kui tugevalt takistas andmete kvaliteedi, lubatud kättesaadavuse või AI-tööriistani jõudmise puudujääk sinu AI-ga seotud tööd?

Protsess

Otsus: Kujunda tööprotsess ümber

  1. SeisKui suures osas juhtudest see toimib?

    Kui sageli kasutasid AI-d oma tavapärastes tööprotsessides viimase 30 päeva jooksul?

  2. SeisKui suures osas juhtudest see toimib?

    Kui sageli kasutasid oma töös juba tuttavat AI-põhist tööviisi, mille sammud olid ette teada?

  3. PidurKui tugevalt see puudujääk takistas?

    Kui tugevalt takistas sobimatu tööprotsess sh vajalik liigse käsitöö osakaal sinu töö tegemist AI abil?

Juhtimine ja kontroll

Otsus: Tugevda otsustusõigusi ja kontrolli

  1. SeisKui suures osas juhtudest see toimib?

    Kui sageli oli enne AI-ga töö alustamist selge, millist infot tohib kasutada ja milline inimkontroll on nõutud?

  2. SeisKui suures osas juhtudest see toimib?

    Kui sageli teadsid AI kasutamisel tekkinud vea või ebaselguse korral, kes otsustab edasise tegevuse ja kellelt abi küsida?

  3. PidurKui tugevalt see puudujääk takistas?

    Kui tugevalt takistas reegli, otsustusõiguse, kontrolli või toe ebaselgus sinu AI-ga seotud tööd?

Tiim: Selle tiimi töö AI-gav4 · 15 küsimustNäita küsimusi

Mõtle oma tiimi peamistele töövoogudele viimase 90 päeva jooksul. Ühte kindlat protsessi ei ole vaja valida — vasta selle põhjal, kuidas töö päriselt käib.

Kes vastab: Tiimijuht ja soovi korral tiimi liikmed

Inimeste oskused

Otsus: Arenda rollipõhiseid oskusi

  1. SeisKui suures osas juhtudest see toimib?

    Kui sageli sai teie peamistes töövoogudes nähtavaks saanud AI-oskuste lünk konkreetse lahenduse — juhendi, harjutamise, mentorluse või koolituse?

  2. SeisKui suures osas juhtudest see toimib?

    Kui sageli jõudis mõne tiimiliikme hästi toimiv AI-põhine töövõte või töövoog ka teiste meeskonnaliikmete tööviisi?

  3. PidurKui tugevalt see puudujääk takistas?

    Kui tugevalt takistas tiimi oskuste või kogemuse puudujääk viimase 90 päeva jooksul tiimi peamistes töövoogudes soovitud tulemuste saavutamist?

Tööriistad

Otsus: Paranda tööriistu, ligipääse või integratsioone

  1. SeisKui suures osas juhtudest see toimib?

    Kui sageli sai tiim lubatud AI-tööriistadega oma peamistes töövoogudes vajaliku töö ära teha?

  2. SeisKui suures osas juhtudest see toimib?

    Kui sageli olid vajalikud ligipääsud ja süsteemiintegratsioonid olemas ning töökorras siis, kui neid vaja läks?

  3. PidurKui tugevalt see puudujääk takistas?

    Kui tugevalt takistas tööriista, ligipääsu või integratsiooni puudujääk teie tööd viimase 90 päeva jooksul?

Andmed

Otsus: Paranda andmeid, nende kasutusõigust, ligipääsuteed või andmejuhtimist

  1. SeisKui suures osas juhtudest see toimib?

    Kui sageli olid teie AI-toega töös vajalikud organisatsiooni andmed piisavalt täielikud, õiged ja ajakohased?

  2. SeisKui suures osas juhtudest see toimib?

    Kui sageli jõudsid tiimi tööks vajalikud organisatsiooni andmed lubatud viisil kasutatavate AI-tööriistadeni — toimiva ühenduse kaudu või selgelt lubatud sisestamisega?

  3. PidurKui tugevalt see puudujääk takistas?

    Kui tugevalt takistas andmete kvaliteedi, lubatud kättesaadavuse või AI-tööriistadeni jõudmise puudujääk teie tööd?

Protsess

Otsus: Kujunda tööprotsess ümber

  1. SeisKui suures osas juhtudest see toimib?

    Kui sageli kasutati teie peamistes töövoogudes kokku lepitud AI-toega tööviisi sõltumata sellest, milline tiimiliige tööd tegi?

  2. SeisKui suures osas juhtudest see toimib?

    Kui sageli oli AI kasutuselevõtul läbi mõeldud terve töövoog koos üleandmiste ja käsitsi jäävate sammudega, mitte ainult üks samm?

  3. PidurKui tugevalt see puudujääk takistas?

    Kui tugevalt takistas sobimatu töövoog või liigne käsitöö tiimil soovitud tulemusi saavutada?

Juhtimine ja kontroll

Otsus: Tugevda otsustusõigusi ja kontrolli

  1. SeisKui suures osas juhtudest see toimib?

    Kui sageli tehti inimkontroll enne AI tulemuse kasutamist nendes juhtudes, kus kontroll oli reegli või riski tõttu vajalik?

  2. SeisKui suures osas juhtudest see toimib?

    Kui sageli oli AI kasutamisel tekkinud vea, ebaselguse või uue kasutusviisi korral selge, kes otsustab edasise tegevuse ja kellelt tiim abi saab?

  3. PidurKui tugevalt see puudujääk takistas?

    Kui tugevalt takistas AI kasutamise reeglite, otsustusvastutuse või vajaliku inimkontrolli ebaselgus viimase 90 päeva jooksul tiimi peamistes töövoogudes soovitud tulemuste saavutamist?

Organisatsioon: Organisatsiooni valmisolek valitud AI-eesmärkideksv4 · 15 küsimustNäita küsimusi

Strateegia eest vastutaja valis enne küsimustiku avamist ühe peamise ja kuni kaks toetavat üldeesmärki. Need kuvatakse küsimuste kohal. Mõtle nende eesmärkidega seotud prioriteetsetele algatustele ja viimasele 90 päevale.

Kes vastab: Peakasutaja ja soovi korral tiimijuhid

Inimeste oskused

Otsus: Arenda rollipõhiseid oskusi

  1. SeisKui suures osas juhtudest see toimib?

    Kui sageli olid prioriteetse algatuse jaoks vajalikud rollid ja oskused enne alustamist nimetatud?

  2. SeisKui suures osas juhtudest see toimib?

    Kui sageli kaeti tuvastatud võimekuslünk arendamise, värbamise või sobiva partneriga õigeks ajaks?

  3. PidurKui tugevalt see puudujääk takistas?

    Kui tugevalt takistas inimeste oskuste, rollide või kogemuse puudujääk strateegilise eesmärgi elluviimist?

Tööriistad

Otsus: Paranda tööriistu, ligipääse või integratsioone

  1. SeisKui suures osas juhtudest see toimib?

    Kui sageli piisas organisatsiooni lubatud AI-põhiste tööriistade funktsioonidest prioriteetse algatuse elluviimiseks?

  2. SeisKui suures osas juhtudest see toimib?

    Kui sageli kontrolliti enne AI-lahenduse laiemat kasutamist, et ligipääsud ja ühendused töötavad ning lahendus on töökindel?

  3. PidurKui tugevalt see puudujääk takistas?

    Kui tugevalt takistas AI-põhise tööriistaportfelli, arhitektuuri või integratsiooni puudujääk strateegilise eesmärgi elluviimist?

Andmed

Otsus: Paranda andmeid, nende kasutusõigust, ligipääsuteed või andmejuhtimist

  1. SeisKui suures osas juhtudest see toimib?

    Kui sageli oli prioriteetse algatuse andmestik piisavalt täielik, õige ja ajakohane ning AI-lahendusega vajalikul viisil ühendatav?

  2. SeisKui suures osas juhtudest see toimib?

    Kui sageli olid enne kasutamist selged andmestiku omanik, AI-ga kasutamise luba, ligipääsutee ja kvaliteedivastutus?

  3. PidurKui tugevalt see puudujääk takistas?

    Kui tugevalt takistas andmete kvaliteedi, AI-ga kasutamise loa või AI-lahendusega ühendamise puudujääk strateegilise eesmärgi elluviimist?

Protsess

Otsus: Kujunda tööprotsess ümber

  1. SeisKui suures osas juhtudest see toimib?

    Kui sageli kujundati prioriteetse algatuse puhul kogu mõjutatud protsess ümber, mitte ei lisatud AI-d üksiku tööriistana?

  2. SeisKui suures osas juhtudest see toimib?

    Kui sageli otsustati AI-algatuse mõõdetud tulemuse ja kogukulu põhjal, kas seda jätkata, muuta, laiendada või lõpetada?

  3. PidurKui tugevalt see puudujääk takistas?

    Kui tugevalt takistas AI-algatuse elluviimist see, et tööprotsess ei sobinud AI kasutamiseks või AI oodatav väärtus polnud selge?

Juhtimine ja kontroll

Otsus: Tugevda otsustusõigusi ja kontrolli

  1. SeisKui suures osas juhtudest see toimib?

    Kui sageli olid enne AI-algatuse rakendamist selged otsustajad ja algatuse riskitasemele sobivad AI kasutamise piirid?

  2. SeisKui suures osas juhtudest see toimib?

    Kui sageli olid enne AI-lahenduse laiemat kasutuselevõttu rakendatud selle riskitasemele vajalikud kontrollid, näiteks tulemuste seire, vajaduse korral inimkontroll ning probleemidest teatamise kord?

  3. PidurKui tugevalt see puudujääk takistas?

    Kui tugevalt takistas AI-algatust see, et polnud selge, kes AI kasutamise heaks kiidab, mida AI-ga teha tohib või kuidas AI vigu ja võimalikku kahju kontrollitakse?

Mida vastaja valib

Vastaja ei vali endale astet. Ta vastab iga küsimuse juures ühel kolmest viiepallisest kirjeldusskaalast. Lisaks saab vastata „Ei kohaldu selle töö puhul“ või „Mul ei ole hindamiseks piisavalt infot“; kumbagi ei teisendata madalaks skooriks.

Kui iseseisvalt saad hakkama?

  1. 1Vajan, et keegi teine teeks sisulise otsuse või töö minu eest
  2. 2Saan hakkama ainult samm-sammulise juhendi või vahetu abiga
  3. 3Saan tüüpilises olukorras hakkama näidise või aeg-ajalt saadava abiga
  4. 4Saan tüüpilistes ja keerukamates olukordades iseseisvalt hakkama
  5. 5Saan hakkama ka ebatüüpilises olukorras ning oskan oma valikut põhjendada

Kui suures osas juhtudest see toimib?

  1. 1Mitte üheski või peaaegu mitte üheski asjakohases juhtumis
  2. 2Vähem kui pooltes asjakohastes juhtumites
  3. 3Ligikaudu pooltes asjakohastes juhtumites
  4. 4Enamikus asjakohastes juhtumites
  5. 5Kõigis või peaaegu kõigis asjakohastes juhtumites

Kui tugevalt see puudujääk takistas?

  1. 1Ei takistanud ega aeglustanud
  2. 2Tekitas väikese ebamugavuse, kuid töö sai tehtud
  3. 3Aeglustas tööd või põhjustas ümbertegemist
  4. 4Sundis tegema palju lisatööd, kasutama ajutist lahendust või tööd edasi lükkama
  5. 5Takistas tulemuse saavutamist või katkestas töö

Kolm tasandit, kolm erinevat vaatepunkti

Inimene · 15

Tulemus kirjeldab sinu tajutud tööolukorda. See ei ole eksam ega töösoorituse hinnang ning nimetatud tulemust näed ainult sina.

Kes vastab: Iga organisatsiooni liige, enda kohta. Vastuseid näeb ainult vastaja ise. Ükski juht ei näe kellegi individuaalset vastust ega tulemust.

Eraldi tööülesannet ei nimetata: vastaja mõtleb oma viimase 30 päeva asjakohasele tööle.

Tiim · 15

Tulemus kirjeldab vastajate tajutud meeskonnapraktikat. Juhi vaade ja piisava rühma liikmete koond jäävad eraldi.

Kes vastab: Tiimijuht ja soovi korral tiimi liikmed. Tiimijuht on ametlik teavitaja; liikmed vastavad samadele küsimustele lisahindajatena, mis teeb ühe inimese arvamusest tiimi tulemuse.

Konkreetset töövoogu ei nimetata: vastaja lähtub oma tiimi peamistest töövoogudest. Alla 2 vastaja on tulemus ühe informandi vaade, mitte üksuse oma.

Organisatsioon · 15

Tulemus kirjeldab vastajate tajutud organisatsioonilist seisu. Eri rollide vaated jäävad enne ühist tõlgendust eraldi.

Kes vastab: Peakasutaja ja soovi korral tiimijuhid. Peakasutaja vastab ettevõtte eest; tiimijuht võib samadele küsimustele vastata, sest need küsivad, kuidas töö päriselt käib. Haldaja saab organisatsiooni andmeid ja eesmärke muuta ning tulemusi näha, kuid küsimustikule ta ei vasta.

Strateegia eest vastutaja valib enne alustamist ühe peamise ja kuni kaks toetavat üldist AI-eesmärki. Alla 2 vastaja on tulemus ühe informandi vaade, mitte üksuse oma.

Millal puudujääk on pidur

Madal seis üksi ei ole veel prioriteet. Üldeesmärgi valik annab viiele valdkonnale vaikimisi seose ning prioriseerimise võrdluspiir on 4 / 5. Valdkond muutub võimalikuks piduriks siis, kui seis jääb sellest piirist alla ja vastajad ütlevad eraldi, et puudujääk aeglustas tööd, tekitas ümbertegemist või takistas tulemust. Tugev otsene takistussignaal võib malli nõrga seose ümber lükata; ilma eesmärgiseose või lüngata valdkonda piduriks ei nimetata.

Inimeste oskused

Arenda rollipõhiseid oskusi

Tööriistad

Paranda tööriistu, ligipääse või integratsioone

Andmed

Paranda andmeid, nende kasutusõigust, ligipääsuteed või andmejuhtimist

Protsess

Kujunda tööprotsess ümber

Juhtimine ja kontroll

Tugevda otsustusõigusi ja kontrolli

Väljund annab üldise tegevussuuna, mõned konkreetsed tegevusideed ja võimaluse lisada organisatsiooni enda ideid. Võimalik pidur jääb hüpoteesiks; mitmest sõltumatust allikast kinnitatud pidurit võib käsitleda tugevama järeldusena.

Mida juht näeb — ja mida ei näe

Nimeline individuaaltulemus kuulub ainult vastajale

Otsene ega kaudne juht ei näe inimese vastuseid, otsustusprofiili ega arengusoovitusi. Organisatsioon saab töötajate pildi ainult anonüümse koondina, kui vastanud on vähemalt 5 mittejuhti ja vastamismäär on vähemalt 60%.

Tiimijuhi ja organisatsiooni eest vastutaja vastused kirjeldavad nende rolli vaadet. Erinevate rollide tulemusi ei sulatata enne tõlgendamist üheks arvuks: vaadete erinevus on ise juhtimisinfo, mitte mõõtmisviga.

Võrdlus teiste organisatsioonidega

Benchmark on lubatud ainult sama instrumendiversiooni, valdkonna, rolli ja võrdlusobjekti korral. Kohort peab sobima tegevusala ja suurusklassiga, sisaldama vähemalt 20 sõltumatut organisatsiooni ning põhinema vaadeldud andmetel. Kuni neid tingimusi ei ole, näitab Lightmark võrdluse puudumist — sünteetilist arvu ei esitata turu tegeliku seisuna.

Versioon ja piirid

Praegu kehtivad küsimustikud: inimene v8, tiim v4, organisatsioon v4. Vastused jäävad alati seotuks selle versiooniga, mille juures need anti; uut versiooni ei kasutata vanade vastuste tagantjärele ümberarvutamiseks.

See on kujundav enesehindamine, mitte eksam, töösoorituse hinnang ega põhjus inimest premeerida või karistada. Küsimused kirjeldavad tajutud olukorda. Järeldusi tuleb kontrollida vestluse, protsessiandmete või muu sõltumatu tõendiga enne suurt investeeringut.

Küsimused meetodi kohta: info@productory.ai