Fallstudie

Hur Chesapeake City Public Schools använder Analytics för att samla in longitudinella data

Lightspeed Systems® och Digital Promise har gått samman för att ge deltagande Digital Promise League of Innovative School Districts ett bättre sätt att spåra och övervaka digitalt engagemang på elevnivå: användningen av Lightspeed Digital Insight™. Detta prisbelönta dataanalysverktyg gör det möjligt för skolor att analysera effektiviteten av sina teknologiinvesteringar och identifiera de elever som riskerar att falla mellan stolarna – allt i realtid Sju distrikt i olika storlekar och lokaliteter deltog i projektet, inklusive Virginias Chesapeake City Offentliga skolor (CPS). CPS är en Lightspeed Systems-kund och medlem i Digital Promise League of Innovative Schools. CPS gick med på att inkludera deras aggregerade, identifierade applikationsanvändnings- och engagemangsdata i pilotstudien för att hjälpa till att ge insikt i elevernas användnings- och engagemangsmönster i digitala lärmiljöer.

Identifiera de betalda verktyg som används av studenter i specifika kurser

CPS initiala dataanalysmål var att bygga en etablerad datamängd från vilken de kunde börja göra analyser och informera beslutsfattande. "Jag tycker att det är väldigt viktigt att ha longitudinella data", säger Jeff Faust, CPS:s Chief Technology Innovation Officer. ”Att basera ett beslut på vilken programvara som används under en eller två månader är inte rättvist eftersom det finns många verktyg som inte används under de första två månaderna av skolan. Samma verktyg kan bli riktigt viktiga under andra terminen. Så med Lightspeed Digital Insight ville vi få dess agenter utskjutna till våra student- och personalenheter så snabbt som möjligt och börja samla in data. Det var vårt ursprungliga fokus, men det är fantastiskt hur snabbt vår användning av verktyget har blivit mycket större än så."

Med Lightspeed Digital Insight ville vi få dess agenter utskjutna till våra student- och personalenheter så snabbt som möjligt och börja samla in data. Det var vårt ursprungliga fokus, men det är fantastiskt hur snabbt vår användning av verktyget har blivit mycket större än så.

Jeff FaustChief Technology Innovation Officer

CPS:s utökade vision för tillämpning och användning av dataanalys i utbildningen

Exekvera en effektiv förändringshanteringsstrategi

Precis som fallet var för skoldistrikt över hela landet blev videokonferenser ett viktigt verktyg för att leverera fjärrinstruktion för CPS. Även om distriktets ledare var mycket stödjande av att liveinstruktioner levereras i detta samarbetsformat, hade de säkerhetsproblem kring ett videokonferensverktyg och flyttar användare till en annan plattform 2021–2022. För att underlätta övergången och uppmuntra tidig användning av den nya plattformen skapade ledarteamet instrumentpaneler inom den anpassningsbara plattformen för varje skola som visade användningsjämförelser för båda verktygen. "Nu när vi har data kan vi dela rapporter på våra superintendentmöten såväl som på våra grund-, mellan- och gymnasierektorsmöten som lyfter fram vem som gör ett bra jobb med att ta till sig den nya plattformen", sa Faust. "Det har varit en rolig tävling för dem, och det har varit en effektiv förändringsstrategi eftersom vi inte har satt någon större press på dem att göra det omedelbara bytet. Istället låter vi data- och appanvändningstrenderna driva förändringen.

Nu när vi har data kan vi dela rapporter på våra föreståndarmöten såväl som på våra grund-, mellan- och gymnasierektorsmöten som visar vem som gör ett bra jobb med att anamma den nya plattformen.

Jeff FaustChief Technology Innovation Officer

Informera licensierings- och budgetbeslut

CPS:s distriktsledare ser fram emot att ha ett års data för att hjälpa till att informera om deras licensförnyelse och inköpsstrategier. "Jag måste granska varje mjukvarulicens som kommer över mitt skrivbord," sa Faust. "Nu, varje gång jag får en förfrågan om programvara anger jag licensen i Lightspeed Digital Insight. När vi har ett helt år med data kommer vi att ha ett bibliotek med vad vi saknar just nu, vilket är vem som har vilken programvara, vem som betalar för den programvaran, och så vidare." Distriktet avser att använda den informationen för att identifiera möjligheter som att köpa distriktsomfattande licenser, i motsats till individuella webbplatslicenser, eller skala ner licenser för att spara pengar där det är ekonomiskt vettigt att göra det.

"Vi vill gå bort från praxis att fortsätta att köpa vissa program eller verktyg eftersom de har ett starkt arv inom utbildning," sa Faust. "Istället kommer vi att ställa mer kritiska frågor kring våra förnyelser och licensiering, som "Hur är adoptionen? Vad är effektiviteten hos produkten? Hjälper det våra elever och lärare att nå sina mål?' Och det är svåra frågor att besvara om du bara har subjektiv och omständig information. Lightspeed Digital Insight ger oss objektiv data som vi kan använda för att informera och svara på dessa frågor."

Faust har stämplat denna metod som kovägsmodellen, vilket i huvudsak innebär att du banar vägar där gångvägar redan finns istället för att försöka designa nya, unika vägar för att det behagar dig. Oundvikligen kommer människor att kringgå din väg och fortfarande gå över gräset. "Jag vill förnya och köpa programvara som vår personal använder eller kommer att använda, och det är effektivt", sa Faust. "Och jag vill ge den utbildning de behöver för att använda den. Men jag vill inte ge utbildning och tvinga våra lärare att använda en plattform eller ett verktyg bara för att vi köpte det.”

Spåra elevernas engagemang och närvaro

Att mäta elevernas engagemang och närvaro blev en helt ny utmaning under läsåret 2020–2021. Hösten 2020 implementerade CPS en hybrid inlärningsmodell där eleverna kunde välja att antingen delta i klassen personligen eller virtuellt. Distriktets pedagoger undervisade också i en modell med två scheman, vilket innebar att de gav undervisning till både elever i klassrummet och elever hemma samtidigt. Det som gjorde modellen med dubbla scheman särskilt svår för lärare var den oförutsägbara karaktären när det gäller elevernas närvaro. Till exempel kan en lärare ha förberett sina lektioner med förväntningen att de skulle ha 12 elever i klassrummet och fyra barn hemma. I verkligheten skulle de oväntat få fyra barn att dyka upp i klassrummet och 12 elever deltar praktiskt taget.

CPS-teamet började använda Lightspeed Digital Insight-engagemangsdata som ett sekundärt mått för att övervaka närvaro och användning utanför campus. "Vi hade många elever som registrerade sig för personlig undervisning, men de dök inte upp", sa Faust. "Vi kunde titta på vår analys och validera att eleverna gick med virtuellt. Vi började också använda uppgifterna för att spåra hur många dagar elever faktiskt dök upp personligen och gjorde sedan justeringar baserat på dessa uppgifter. Till exempel kunde vi titta på data och se att endast 20% studenter var på ett visst campus en viss dag. Baserat på den informationen kunde rektorn välja att ta med fler studenter tillbaka till campus eftersom de inte hade kapacitet."

Vi kunde titta på vår analys och validera att eleverna gick med virtuellt. Vi kunde titta på data och se att endast 20% studenter var på ett visst campus en viss dag. Baserat på den informationen kunde rektorn välja att ta med fler studenter tillbaka till campus eftersom de inte hade kapacitet.

Jeff FaustChief Technology Innovation Officer

Avslöja olicensierade appar

CPS skapade instrumentpaneler för rektorer på varje skola för att hjälpa dem att implementera förändringshanteringsstrategier, spåra elevernas närvaro och övervaka apparna som används av deras elever. Varje huvudman har tillgång till en instrumentpanel som har de 10 mest licensierade och godkända apparna som används och de 10 bästa olicensierade apparna som används.

CPS-ledare hoppas att insyn i olicensierad appanvändning kommer att göra det möjligt för distrikts- och skolledare att dra vissa samband mellan applikationsanvändning och elevprestationer och informera framtida beslutsfattande och instruktionsstrategier. Till exempel visar Lightspeeds data att vissa klasser använder ett populärt matematikprogram, men det är inte licensierat av CPS. "Det här verktyget är roligt och engagerande, men frågan är om det faktiskt är effektivt eller inte," sa Faust. – Det är fortfarande lite av en gråzon. Med Lightspeed Digital Insight vet vi nu vilka skolor som använder det verktyget. Korrelation är inte orsakssamband, men tänk om det är samma skolor där eleverna presterar bäst i sina årsslutsbedömningar? Om så är fallet kanske vi måste ha en annan konversation kring det matematiska verktyget. Det har varit värdefullt för oss att spåra den här typen av "luriga" applikationer som används som vi inte kände till.

Främja datasekretesskonversationer

CPS utnyttjar Lightspeed Digital Insight integritetsvarningar och applikationsanvändningsdata för att identifiera skolor som har antagit och aktivt använder verktyg som inte uppfyller distriktets sekretessstandarder. Utrustade med denna kunskap kan distriktsledare meddela skolledare om denna användning och förse dem med rekommendationer för andra plattformar som är mycket lika men som följer distriktets integritetspolicy för studentdata.

Skapa en rådgivande datakommitté

För att främja fler samtal kring data och hur man omsätter sin analys i handling, bildade CPS en rådgivande datakommitté. Dessa kommittémedlemmar undersöker sina förfaranden för adoption och programvaruanskaffning i förhållande till deras applikationsanvändning och engagemangsdata och tar upp frågor som följande:

  • Vad är det för programvara vi använder?
  • Hur vet vi om dessa plattformar fungerar?
  • Visste vi att detta verktyg eller plattform används?

Kommittémedlemmar arbetar också med distriktets instruktionsledare för att utföra en granskning av de gratisapplikationer som används på CPS. De hjälper också instruktionsledare att underlätta samtal om vilka gratisapplikationer distriktets elever och personal bör eller inte bör använda. "Du kan inte riktigt börja ändra en praxis förrän du vet vad som händer," sa Faust. "Genom denna information får vi den helhetsbild som vi behöver för att etablera och implementera några effektiva strategier för att ändra praxis. Det har också hjälpt till att förändra vår kultur genom att omdefiniera vad vi behöver fråga och vilken medvetenhet vi behöver ha.

Viktiga insikter och nästa steg

CPS:s dataresa är verkligen imponerande. I framtiden avser distriktet att ytterligare integrera dataanalys för att påskynda deras programvarugodkännandeprocess och ytterligare stärka deras efterlevnadsinsatser på pedagognivå.

"Vi vill göra mjukvaruanskaffningsprocessen så smärtfri som möjligt och ta bort byråkratin ur den", sa Faust. "Men vi vill också se till att det är en bra process, så vi vill se till att vi ställer viktiga frågor, till exempel 'Vad är integritetspolicyn? Har säljaren undertecknat studenternas integritetslöfte? Har säljaren några standarder som de är certifierade och överensstämmer med?' Den typen av frågor har ställts högst upp i vår process för godkännande av programvara eftersom vi vill att våra rektorer och lärare också tänker på dessa saker. Och vi vill att de ska känna till organisationer som IMS Global Learning Consortium och göra en del inledande efterforskningar för att se till att programvaran de efterfrågar är säker. Att ha tillgång till Lightspeed Digital Insight har verkligen startat några hälsosamma samtal för oss om datakompetens och datamedvetenhet.

Digital Promise arbetar i skärningspunkten mellan utbildningsledare, forskare och teknikutvecklare för att förbättra inlärningsmöjligheterna för alla och överbrygga det digitala lärandegapet. För när alla elever har rättvis tillgång till teknik, när alla deltar och när alla lär sig, drar vi alla nytta av ett mer engagerat, informerat och rättvist samhälle.