Ciclo 01: Fundação & Extração Multimodal
Criação da arquitetura central desacoplada, pipeline de extração estrutural (Docling + RapidOCR), API assíncrona FastAPI, dataset ground truth e primeira edição das Normas Semânticas Brasileiras.
Roadmap Público de Desenvolvimento
Acompanhe os marcos históricos e o planejamento estratégico do ecossistema Acessília (2025–2027+): da extração multimodal determinística e planejamento formal de agentes (PDDL 2.2 + Agno) à preparação técnica para implantação no Núcleo de Acessibilidade da UFG e dispositivos assistivos abertos.
Planejamento Estratégico Multidisciplinar
Quatro Ciclos de Evolução Tecnológica
Transparência contínua com a comunidade acadêmica, desenvolvedores de software livre e órgãos de acessibilidade.
Ciclo 02: Agentes PDDL & Gestor NAI
Planejamento formal PDDL 2.2 com Agno e Fast Downward, gateway MCP desacoplado (Acessília Toolbox), painel institucional Fastify/SQLite com Diff lado a lado e app nativo Android em Kotlin com Sherpa-ONNX offline.
Ciclo 03: Implantação Institucional UFG
Fase de planejamento e preparação técnica para entrada em operação no Núcleo de Acessibilidade da UFG, esteira de digitalização de acervo acadêmico, telemetria em cluster LaMCAD e linter automatizado em CI/CD.
Ciclo 04: EPUB 3 & Hardware Assistivo
Geração de EPUB 3 com Media Overlays sincronizados (voz e texto), publicação aberta do app móvel de matemática, evolução dos óculos abertos Acessília Glasses e replicação do modelo para outras universidades federais.
Linha do Tempo Oficial
Detalhamento Técnico dos Marcos por Repositório
Cada marco reflete entregas verificáveis e implementações ativas nos repositórios da organização A11yDevs.
2025 – Início de 2026 • Concluído
Marco 01
Fundação do Pipeline Central, Exportadores Nativos e Normas Semânticas
Estruturação da base computacional e normativa do projeto. O foco foi garantir que documentos acadêmicos complexos (PDFs com diagramas, colunas duplas e equações) fossem processados sem perda de hierarquia e convertidos deterministicamente em múltiplos formatos universais de leitura.
Entregas e Módulos Implementados:
- Acessília Core (A11yDevs/acessilia): Concepção da arquitetura desacoplada em três camadas (Domínio → Aplicação → Interface). Pipeline de extração estrutural integrando Docling e RapidOCR/Tesseract. API assíncrona FastAPI com controle de jobs (`/api/v1/jobs`), download seguro via tokens efêmeros, persistência em SQLite e imagens de contêiner publicadas no GHCR (`main` e `main-slim`).
- Formatos Acessíveis Nativos: Geração simultânea de PDF/UA (ISO 14289) com árvores de tags lógicas, áudio narrado (MP3 com síntese TTS e audiodescrição embutida), HTML5 semântico com equações em MathML legíveis por leitores de tela, TXT e DOCX estruturado.
- Dataset de Validação (A11yDevs/acessilia-dataset): Curadoria de 120+ documentos universitários em 3 estágios (`input/`, `intermediate/`, `outputs/`), incluindo tutoriais completos de programação, apostilas de ciências exatas com fórmulas em LaTeX limpas e degradadas (ruído/rotação) e gabaritos de teste.
-
Normas Brasileiras de Descrição Semântica (A11yDevs/normas-acessilia): Publicação da versão 1.1.0 das normas técnicas. Estruturação das Famílias ACESSILIA-100 a 800 (100: Objetividade e Fidelidade, 200: Imagens, 300: Gráficos/Tabelas, 400: Científico, 500: Educacional, 600: Multimídia, 700: Conformidade, 800: Perfis) com identificadores estáveis `ACL-
- - `. - Protótipo de Matemática por Voz (A11yDevs/acessilia-math-termux): Protótipo P0/P1 de navegação auditiva de fórmulas matemáticas estruturadas sobre Extended MathML semântico (`acc:*`), com reconhecimento de voz 100% offline via Sherpa-ONNX (modelo NeMo CTC português) e feedback de beeps binaurais (880 Hz / 440 Hz).
2026 • Em Execução
Marco 02 (Atual)
Arquitetura Agêntica Formal (PDDL 2.2 + Agno) & Acessília Gestor Institucional
Marco técnico em andamento. Eliminação de alucinações de orquestração por meio de planejamento formal matemático (PDDL), desacoplamento de ferramentas via gateway MCP, consolidação do portal institucional web com WCAG 2.2 AAA e submissão do benchmark acadêmico Dr.DocBench.
Entregas e Módulos em Execução:
- Planejamento Agêntico Formal PDDL 2.2 no Core (A11yDevs/acessilia): Implementação da arquitetura PMV 2.1 com framework Agno: o `InformationalStructuralAgent` (Agno + Docling) extrai o `processing-manifest.json` com obrigações estruturais, métodos admissíveis e custos inteiros; o `PlannerAgent` compila deterministicamente o `problem.pddl` a partir de `domain_v2.2.pddl` com minimização estrita de custo (`:metric minimize (total-cost)`); suporte duplo a planners (`internal` via DAG heurístico e `fast-downward` A* blind com axiomas), com modo `both` para verificação diferencial formal; `ExecutorAgent` via Agno Workflow nominal gerando `execution-report.json`. Nenhum LLM gera PDDL diretamente.
- Stateless Capability Gateway & MCP (A11yDevs/acessilia-toolbox): Gateway desacoplado expondo capacidades neutras de provedor via REST (`POST /v1/capabilities/{id}:execute`) e protocolo MCP (Model Context Protocol). Publicação formal de predicados e fragmentos PDDL em `/planning/predicates` e `/planning/domain-fragments`, isolando a lógica agêntica de provedores como Docling-serve, MinerU, Valkey e MinIO.
- Acessília Gestor — NAI/UFG (A11yDevs/acessilia-ufg): Painel Web institucional em Node.js / Fastify com SQLite WAL (`better-sqlite3`, 30 tabelas relacionais normalizadas), Argon2id e RBAC rigoroso (Admin, Professor, Revisora, Estudante). Acessibilidade estrita WCAG 2.2 AAA: barra de zoom tipográfico (A/A+/A++), Alto Contraste amarelo/preto (`#000000`/`#ffff00`), Dark Slate ergonômico (`#0b1120`), modo Dislexia, régua focal de leitura (`Alt+R`), leitor web de audiolivro e **Fluxo de Revisão Técnica Humana com Diff comparativo lado a lado** (PDF original escaneado vs. texto acessibilizado).
- App Móvel Acessília Math Android (A11yDevs/acessilia-math-android): Portabilidade do núcleo de navegação em árvore matemática (`MathNode`, `ExtendedMathMLParser`, `MathNavigator`) para aplicativo Android nativo em Kotlin. Integração JNI com `sherpa-onnx` arm64-v8a e ONNX Runtime para reconhecimento de fala 100% offline em português, suporte ao leitor de tela TalkBack e botões táteis ampliados.
- Benchmark Científico Dr.DocBench: Submissão do artigo científico consolidando a metodologia de avaliação objetiva de fidelidade estrutural, OCR de fórmulas e precisão semântica, processado na infraestrutura de supercomputação do LaMCAD/UFG.
2026 / 2027 • Em Preparação
Marco 03
Implantação e Validação Institucional no Ensino Superior
Fase de planejamento e preparação técnica voltada para a entrada em operação no ambiente real da universidade. O sistema será integrado aos fluxos institucionais para apoiar a equipe de transcrição e adaptação no atendimento a discentes cegos e com baixa visão.
Metas em Preparação e Homologação:
- Preparação para Entrada em Operação no Núcleo de Acessibilidade da UFG: O sistema está em fase de planejamento e preparação técnica para, em breve, entrar em uso regular pela equipe de adaptadores e revisores do Núcleo de Acessibilidade da UFG. Isso inclui homologação em ambiente universitário, definição de protocolos pedagógicos e treinamento no fluxo de revisão técnica com diff lado a lado.
- Esteira Automatizada de Conversão de Acervo Acadêmico: Implantação de rotinas para digitalização e conversão em lote de bibliografias básicas, ementas, apostilas e avaliações dos cursos de graduação e pós-graduação da UFG, garantindo prazos compatíveis com o calendário letivo.
- Observabilidade em Cluster (A11yDevs/acessilia-observability): Mecanismo unificado de telemetria distribuída, monitoramento contínuo de filas assíncronas, métricas de GPU no supercomputador do LaMCAD/UFG e logs de auditoria em conformidade com a Lei Brasileira de Inclusão (LBI nº 13.146/2015).
- Auditoria Contínua com `acessilia-lint` (A11yDevs/normas-acessilia): Integração do linter formal de descrições semânticas em pipelines de CI/CD para verificação automática de esquemas JSON/XSD e conformidade estrita com as normas da Família ACESSILIA-700 antes da disponibilização de materiais.
2027+ • Futuro & Expansão
Marco 04
Formatos Multimodais Avançados, EPUB 3 Media Overlays & Dispositivos Vestíveis
Expansão para além dos navegadores e leitores de tela convencionais, viabilizando novos formatos abertos de leitura e interfaces físicas vestíveis para garantir acessibilidade em tempo real dentro e fora da sala de aula.
Metas Estratégicas Planejadas:
- Exportador Nativo EPUB 3 com Media Overlays Sincronizados: Geração de livros digitais acessíveis com sincronização de áudio narrado e realce visual de texto em tempo real (SMIL / Media Overlays), beneficiando tanto pessoas cegas quanto estudantes com dislexia, TDAH e baixa visão.
- Distribuição Pública do Acessília Math Android: Lançamento oficial nas lojas abertas (F-Droid) do aplicativo autônomo para exploração tátil e auditiva de expressões matemáticas complexas em aulas de Cálculo, Álgebra Linear e Física.
- Hardware Assistivo Acessília Glasses (A11yDevs/acessilia-glasses): Evolução do protótipo vestível de hardware aberto: captura por microcâmera em armação de óculos, processamento multimodal via rede sem fio e retorno em áudio por condução óssea, permitindo ao estudante cego acompanhar lousas, quadros e projeções em tempo real.
- Replicação em Outras Instituições Federais de Ensino Superior (IFES): Empacotamento de pacote de distribuição e manual de implantação aberto para outros núcleos de acessibilidade de universidades públicas brasileiras, consolidando uma rede cooperativa nacional de material acessível.
Matriz de Componentes
Estado Atual dos Repositórios do Ecossistema
Mapeamento dos oito componentes de código aberto mantidos pela comunidade A11yDevs.
| Módulo / Repositório | Papel Arquitetural | Tecnologias Centrais | Ciclo do Roadmap | Status Atual |
|---|---|---|---|---|
| A11yDevs/acessilia | Motor Agêntico Central, API REST e Exportadores Multimodais | Python 3.11+, FastAPI, Agno, PDDL 2.2, Docling, Fast Downward, Docker | Ciclo 01 & 02 | ⚡ Em Execução (PMV 2.1) |
| A11yDevs/acessilia-toolbox | Stateless Capability Gateway & Servidor MCP | Python, FastAPI, MCP Protocol, Docker, MinIO, Valkey, PDDL fragments | Ciclo 02 | ⚡ Em Execução |
| A11yDevs/acessilia-ufg | Acessília Gestor Institucional (NAI / UFG) | Node.js, Fastify, SQLite WAL (30 tabelas), Argon2id, WCAG 2.2 AAA, Diff comparativo | Ciclo 02 & 03 | ⏳ Piloto / Em Preparação |
| A11yDevs/acessilia-dataset | Conjunto de Testes, Ground Truth e Fixtures de Extração | PDFs acadêmicos, imagens sintéticas de fórmulas, manifestos PDDL, JSON Schema | Ciclo 01 & 02 | ✓ Concluído / Contínuo |
| A11yDevs/acessilia-math-android | Navegador Audível Nativo de Fórmulas para Android | Kotlin puro (JVM), Android SDK, TalkBack, Sherpa-ONNX JNI, ONNX Runtime | Ciclo 02 & 04 | ⚡ Em Execução |
| A11yDevs/acessilia-math-termux | Protótipo de Validação de Navegação Matemática por Voz | Python, Termux:API, Extended MathML, Sherpa-ONNX offline, ffmpeg | Ciclo 01 | ✓ Concluído (P0/P1) |
| A11yDevs/normas-acessilia | Sistema Brasileiro de Normas para Descrição Semântica | Famílias ACESSILIA-100 a 800, JSON Schema 2020-12, XSD, acessilia-lint | Ciclo 01 & 03 | ✓ Concluído (v1.1.0) / CI |
| A11yDevs/acessilia-observability | Telemetria, Filas Assíncronas e Métricas de GPU LaMCAD | Prometheus, Grafana, OpenTelemetry, métricas NVIDIA CUDA | Ciclo 03 | ⏳ Em Preparação |
| A11yDevs/acessilia-glasses | Dispositivo Vestível Assistivo de Hardware Aberto | Câmera embarcada, áudio por condução óssea, modelos de visão multimodal | Ciclo 04 | ✦ Planejado |
Decisões Arquiteturais
Pilares de Engenharia do Acessília
Como resolvemos os desafios de confiabilidade, determinismo e acessibilidade universal.
Planejamento Formal PDDL 2.2 + Agno
Diferente de sistemas agênticos baseados em prompts livres que sofrem com alucinações, o Acessília compila as obrigações do documento em um problema formal PDDL com minimização estrita de custo inteiro. Nenhum LLM escreve PDDL diretamente; a composição é matematicamente verificável por planners de referência (Fast Downward / DAG heurístico).
Gateway Desacoplado & Padrão MCP
O Acessília Toolbox adota uma tríade contratual clara: OpenAPI define o contrato sintático de rede, MCP (Model Context Protocol) define o contrato de interação entre agentes e ferramentas, e PDDL define o contrato semântico de composição. O motor agêntico nunca se acopla rigidamente a bibliotecas como Docling ou MinerU.
ASR Offline & Extended MathML Semântico
Para democratizar o acesso em sala de aula, o Acessília Math opera 100% offline via Sherpa-ONNX (modelo CTC quantizado int8) e árvore sintática de Extended MathML (`acc:*`). O estudante cego navega por comandos falados dinâmicos ("entrar fração", "ir para numerador", "onde estou", "subir") com feedback sonoro binaural sem depender de internet.
Revisão Humana com Diff Lado a Lado
A inteligência artificial acelera a produção, mas a validação pedagógica institucional exige rigor. O Acessília Gestor implementa um fluxo de revisão técnica com comparador visual lado a lado (PDF original escaneado vs. documento gerado), permitindo correções pontuais antes da publicação no acervo oficial.
Declaração de Conformidade de Acessibilidade
O sítio oficial do Acessília foi projetado e auditado para alcançar nível AAA de conformidade segundo as Diretrizes de Acessibilidade para Conteúdo Web (WCAG 2.2) do W3C e as recomendações do e-MAG (Modelo de Acessibilidade em Governo Eletrônico).
WCAG 2.2 AAA
e-MAG Governo Federal
PDF/UA (ISO 14289)
MathPlayer & MathML
HTML5 Semântico