Consultoria para o desenvolvimento e avaliação de um sistema formativo de avaliação e reporte com IA para o fortalecimento da prática de ensino no Peru

Descrição

O Banco Interamericano de Desenvolvimento (BID) está solicitando empresas de consultoria especializadas para o co-projeto, implementação e avaliação psicométrica de um sistema piloto de avaliação formativa e relatórios automatizados com Inteligência Artificial.

O projeto será executado na plataforma EVAL-AI existente (cujo código-fonte e documentação técnica serão fornecidos pelo Banco) com o objetivo de fortalecer as capacidades de feedback pedagógico na área de matemática dentro do sistema educacional peruano.

1. Projeto do sistema de relatórios e métricas de IA (Componente 1)
Painéis de visualização analítica: Projete e implemente painéis interativos e intuitivos dentro do EVAL-AI para que os professores possam consultar em tempo real os resultados das respostas respondidas pelos alunos.

Desenvolvimento de métricas pedagógicas: Configure algoritmos para extrair indicadores-chave de desempenho, como desempenho específico por habilidade matemática, níveis de dificuldade indexados, porcentagem líquida de respostas corretas, mapas de erros comuns e detecção automática de áreas de oportunidade acadêmica.

Segmentação avançada de dados: Permitir filtros dinâmicos que permitem aos professores isolar e interpretar informações por grupo inteiro, aluno individual, períodos específicos, tópicos curriculares ou competências avaliadas.

Relatórios Portativos e Usabilidade: Desenvolver um sistema de relatórios consolidados totalmente para download e executar testes funcionais de experiência do usuário (UX) com professores ativos para validar a usabilidade e o carregamento de dados.

2. Estrutura de Implementação, Escopo e Design de Amostras (Componente 2)
Distribuição do estudo piloto: A consultoria será implantada em 30 instituições educacionais na região metropolitana de Lima sob uma metodologia experimental estruturada em dois blocos: um Grupo de Tratamento (15 escolas que usarão Eval-IA) e um Grupo de Controle (15 escolas que manterão seus métodos tradicionais).

Cronograma operacional e facilitadores: O piloto terá uma duração intensiva de aproximadamente 2 meses, contemplando no mínimo 7 sessões de trabalho direto com professores e o envio de pelo menos 8 facilitadores de campo para supervisão técnica semanal nas escolas.

Linhas de Base e Saída (Medição de Impacto): Colete métricas no início e no fim da intervenção em ambos os grupos de estudo. O modelo metodológico diferenciará estritamente impactos diretos (conhecimento pedagógico e práticas do professor) dos impactos indiretos (aprendizagem alcançada pelos alunos).

3. Validação psicométrica, análise de dados e escalabilidade (Componente 3)
Testes de confiabilidade estatística: Documentar matematicamente a evidência de consistência interna dos instrumentos de avaliação aplicados por meio da realização de testes estatísticos avançados, utilizando o coeficiente alfa de Cronbach e o coeficiente ômega de McDonald's.

Validação de construtos estruturais: Aplicar uma análise fatorial exaustiva nas matrizes de dados coletadas para certificar rigorosamente a validade técnica dos construtos e instrumentos psicométricos administrados.

Otimização iterativa de tecnologia: Avalie o desempenho operacional da aplicação EVAL-AI em ambientes de conectividade real. A empresa precisará ajustar e refinar a arquitetura do software com base nas descobertas de usabilidade e no feedback coletado.

Roteiro para escalabilidade: Consolidar o relatório técnico do projeto em um relatório executivo final que inclua lições aprendidas, conclusões analíticas e recomendações estratégicas voltadas para uma eventual escalabilidade do sistema em nível nacional.

Nota: Empresas interessadas devem revisar os requisitos no Portal de Licitantes do BEO.