A Lightspeed Systems® e a Digital Promise uniram forças para fornecer aos participantes da Digital Promise League of Innovative School Districts uma maneira melhor de rastrear e monitorar o engajamento digital em nível de aluno: o uso do Lightspeed Digital Insight™. Esta premiada ferramenta de análise de dados permite que as escolas analisem a eficácia de seus investimentos em tecnologia e identifiquem os alunos em risco de cair nas rachaduras — tudo em tempo real. Sete distritos variando em vários tamanhos e localidades participaram do projeto, incluindo as Chesapeake City Public Schools (CPS) da Virgínia. A CPS é um cliente da Lightspeed Systems e um membro da Digital Promise League of Innovative Schools. A CPS concordou em incluir seus dados agregados e identificados de uso e engajamento de aplicativos no estudo piloto para ajudar a fornecer insights sobre os padrões de uso e engajamento de alunos em ambientes de aprendizagem digital.
Identificando as ferramentas pagas usadas pelos alunos em cursos específicos
O objetivo inicial da análise de dados do CPS era construir um conjunto de dados estabelecido a partir do qual eles pudessem começar a fazer análises e informar a tomada de decisões. "Acho que é realmente importante ter dados longitudinais", disse Jeff Faust, Diretor de Inovação Tecnológica do CPS. "Basear uma decisão em qual software é usado em um ou dois meses não é justo porque há muitas ferramentas que não são usadas nos primeiros dois meses de aula. Essas mesmas ferramentas podem se tornar realmente importantes no segundo semestre. Então, com o Lightspeed Digital Insight, queríamos que seus agentes fossem enviados para nossos dispositivos de alunos e funcionários o mais rápido possível e começar a coletar dados. Esse era nosso foco original, mas é incrível o quão rápido nosso uso da ferramenta se tornou muito maior do que isso."
Com o Lightspeed Digital Insight, queríamos que seus agentes fossem enviados para os dispositivos de nossos alunos e funcionários o mais rápido possível e começar a coletar dados. Esse era nosso foco original, mas é incrível o quão rápido nosso uso da ferramenta se tornou muito maior do que isso.
Visão expandida do CPS para a aplicação e uso de análise de dados na educação
Executando uma estratégia eficaz de gerenciamento de mudanças
Como foi o caso dos distritos escolares em todo o país, a videoconferência se tornou uma ferramenta essencial para fornecer instruções remotas para o CPS. Embora os líderes do distrito tenham apoiado muito a instrução ao vivo sendo fornecida neste formato colaborativo, eles tiveram preocupações de segurança em torno de uma ferramenta de videoconferência e estão mudando os usuários para uma plataforma diferente em 2021–2022. Para facilitar a transição e incentivar a adoção antecipada da nova plataforma, a equipe de liderança criou painéis dentro da plataforma personalizável para cada escola que mostravam as comparações de uso para ambas as ferramentas. "Agora que temos os dados, podemos compartilhar relatórios em nossas reuniões de superintendentes, bem como em nossas reuniões de diretores de escolas de ensino fundamental, médio e médio que destacam quem está fazendo um ótimo trabalho ao adotar a nova plataforma", disse Faust. "Foi uma competição divertida para eles e uma estratégia eficaz de gerenciamento de mudanças porque não colocamos muita pressão sobre eles para fazer a troca imediata. Em vez disso, estamos deixando as tendências de uso de dados e aplicativos conduzirem a mudança.
Agora que temos os dados, podemos compartilhar relatórios em nossas reuniões de superintendentes, bem como em nossas reuniões de diretores de escolas de ensino fundamental, médio e superior, destacando quem está fazendo um ótimo trabalho na adoção da nova plataforma.
Informando decisões de licenciamento e orçamento
Os líderes distritais do CPS estão ansiosos para ter um ano de dados para ajudar a informar suas estratégias de renovação e compra de licenças. "Tenho que revisar cada licença de software que chega à minha mesa", disse Faust. "Agora, toda vez que recebo uma solicitação de software, insiro a licença no Lightspeed Digital Insight. Quando tivermos um ano inteiro de dados, teremos uma biblioteca do que está faltando agora, que é quem tem qual software, quem está pagando por esse software e assim por diante." O distrito pretende usar essas informações para identificar oportunidades, como comprar licenças em todo o distrito, em vez de licenças de sites individuais, ou reduzir o licenciamento para economizar dinheiro onde fizer sentido financeiro fazê-lo.
“Queremos nos afastar da prática de continuar comprando certos programas ou ferramentas porque eles têm um forte legado na educação”, disse Faust. “Em vez disso, faremos perguntas mais críticas sobre nossas renovações e licenciamentos, como: 'Como é a adoção? Qual é a eficácia do produto? Ele está ajudando nossos alunos e professores a atingir seus objetivos?' E essas são perguntas difíceis de responder se você tiver apenas informações subjetivas e circunstanciais. O Lightspeed Digital Insight nos fornece dados objetivos que podemos usar para informar e responder a essas perguntas.”
Faust rotulou essa metodologia como o modelo de caminho de vaca, o que significa essencialmente que você pavimenta os caminhos onde já existem passarelas em vez de tentar projetar novos caminhos exclusivos porque lhe agrada. Inevitavelmente, as pessoas contornarão seu caminho e ainda andarão sobre a grama. “Quero renovar e comprar um software que nossa equipe esteja usando ou usará, e que seja eficaz”, disse Faust. “E quero fornecer o treinamento de que precisam para usá-lo. Mas não quero fornecer treinamento e forçar nossos professores a usar uma plataforma ou ferramenta só porque a compramos.”
Acompanhamento do envolvimento e frequência dos alunos
Medir o engajamento e a frequência dos alunos se tornou um desafio totalmente novo durante o ano letivo de 2020–2021. No outono de 2020, o CPS implementou um modelo de aprendizagem híbrido em que os alunos podiam escolher assistir às aulas presencialmente ou virtualmente. Os educadores do distrito também estavam ensinando em um modelo de dupla escala, o que significa que estavam dando instruções aos alunos na sala de aula e aos alunos em casa simultaneamente. O que tornou o modelo de dupla escala particularmente difícil para os professores foi a natureza imprevisível em termos de frequência dos alunos. Por exemplo, um professor pode ter preparado suas aulas com a expectativa de que teria 12 alunos na sala de aula e quatro crianças em casa. Na realidade, eles inesperadamente teriam quatro crianças aparecendo na sala de aula e 12 alunos participando virtualmente.
A equipe do CPS começou a usar os dados de engajamento do Lightspeed Digital Insight como uma métrica secundária para monitorar a frequência e o uso fora do campus. “Tínhamos muitos alunos que se inscreveram para aulas presenciais, mas eles não estavam aparecendo”, disse Faust. “Conseguimos analisar nossas análises e validar que os alunos estavam participando virtualmente. Também começamos a usar os dados para rastrear o número de dias em que os alunos realmente apareceram pessoalmente e, em seguida, fizemos ajustes com base nesses dados. Por exemplo, poderíamos analisar os dados e ver que apenas 20% dos alunos estavam em um campus específico em um determinado dia. Com base nessas informações, o diretor poderia optar por trazer mais alunos de volta ao campus porque eles não estavam com a capacidade máxima.”
Pudemos analisar nossas análises e validar que os alunos estavam se juntando virtualmente. Pudemos analisar os dados e ver que apenas 20% dos alunos estavam em um campus específico em um determinado dia. Com base nessas informações, o diretor poderia optar por trazer mais alunos de volta ao campus porque eles não estavam na capacidade máxima.
Descobrindo aplicativos sem licença
O CPS criou painéis para diretores em cada escola para ajudá-los a implementar estratégias de gerenciamento de mudanças, rastrear a frequência dos alunos e monitorar os aplicativos usados por seus alunos. Cada diretor tem acesso a um painel que tem os 10 principais aplicativos licenciados e aprovados sendo usados e os 10 principais aplicativos não licenciados sendo usados.
Os líderes do CPS esperam que a visibilidade do uso de aplicativos sem licença permita que os líderes distritais e escolares estabeleçam algumas correlações entre o uso do aplicativo e o desempenho dos alunos e informem futuras tomadas de decisão e estratégias instrucionais. Por exemplo, os dados do Lightspeed mostram que algumas classes estão usando um programa de matemática popular, mas ele não é licenciado pelo CPS. "Essa ferramenta em particular é divertida e envolvente, mas a questão é se ela é realmente eficaz ou não", disse Faust. "Isso continua sendo uma área um pouco cinzenta. Usando o Lightspeed Digital Insight, agora sabemos quais escolas estão usando essa ferramenta. Correlação não é causalidade, mas e se essas forem as mesmas escolas onde os alunos estão tendo o melhor desempenho em suas avaliações de fim de ano? Se for esse o caso, talvez precisemos ter uma conversa diferente sobre essa ferramenta de matemática. Rastrear esses tipos de aplicativos "furtivos" sendo usados dos quais não sabíamos tem sido valioso para nós.
Promovendo conversas sobre privacidade de dados
O CPS está aproveitando os alertas de privacidade do Lightspeed Digital Insight e os dados de uso do aplicativo para identificar escolas que adotaram e estão usando ativamente ferramentas que não atendem aos padrões de privacidade do distrito. Equipados com esse conhecimento, os líderes do distrito podem notificar os líderes escolares sobre esse uso e fornecer a eles recomendações para outras plataformas que são muito semelhantes, mas cumprem com as políticas de privacidade de dados de alunos do distrito.
Criando um Comitê Consultivo de Dados
Para promover mais conversas sobre dados e como colocar suas análises em ação, o CPS formou um comitê consultivo de dados. Os membros desse comitê estão examinando seus procedimentos de adoção e aquisição de software em relação ao uso de seus aplicativos e dados de engajamento e abordando questões como as seguintes:
- Qual é o software que estamos usando?
- Como sabemos se essas plataformas estão funcionando?
- Sabíamos que essa ferramenta ou plataforma está sendo usada?
Os membros do comitê também estão trabalhando com os líderes instrucionais do distrito para realizar uma auditoria dos aplicativos gratuitos usados no CPS. Eles também estão ajudando os líderes instrucionais a facilitar conversas sobre quais aplicativos gratuitos os alunos e funcionários do distrito devem ou não usar. "Você não pode realmente começar a mudar uma prática até saber o que está acontecendo", disse Faust. "Por meio desses dados, estamos obtendo a visão geral de que precisamos para estabelecer e implementar algumas estratégias eficazes para mudar as práticas. Isso também ajudou a transformar nossa cultura ao redefinir o que precisamos perguntar e qual conscientização precisamos ter.
Principais insights e próximos passos
A progressão da jornada de dados do CPS é certamente impressionante. Seguindo em frente, o distrito pretende integrar ainda mais a análise de dados para agilizar seu processo de aprovação de software e fortalecer ainda mais seus esforços de conformidade no nível do educador.
“Queremos tornar o processo de aquisição de software o mais indolor possível e tirar a burocracia dele”, disse Faust. “Mas também queremos ter certeza de que é um bom processo, então queremos ter certeza de que estamos fazendo perguntas importantes, como, 'Qual é a política de privacidade? O fornecedor assinou o compromisso de privacidade do aluno? O fornecedor tem algum padrão que ele é certificado e com o qual está em conformidade?' Esses tipos de perguntas foram colocadas no topo do nosso processo de aprovação de software porque queremos que nossos diretores e professores pensem sobre essas coisas também. E queremos que eles se familiarizem com organizações como o IMS Global Learning Consortium e façam alguma pesquisa inicial para garantir que o software que estão solicitando seja seguro. Ter acesso ao Lightspeed Digital Insight realmente iniciou algumas conversas saudáveis para nós sobre alfabetização e conscientização de dados.
A Digital Promise trabalha na intersecção de líderes educacionais, pesquisadores e desenvolvedores de tecnologia para melhorar as oportunidades de aprendizagem para todos e fechar a Lacuna de Aprendizagem Digital. Porque quando todos os alunos têm acesso equitativo à tecnologia, quando todos participam e quando todos aprendem, todos nós nos beneficiamos de uma sociedade mais engajada, informada e justa.
