NVIDIA e Hugging Face lançam NV-Raw2Insights-US: IA adaptativa para ultrassonografia com dados brutos e física aplicada
Uma revolução na ultrassonografia: do processamento tradicional à inteligência artificial adaptativa
A ultrassonografia é uma das modalidades de imagem médica mais utilizadas no mundo, valorizada por sua segurança, portabilidade, custo acessível e capacidade de gerar imagens em tempo real. Tradicionalmente, as imagens de ultrassom são produzidas por meio de um pipeline de reconstrução manual que simplifica os dados captados pelo sensor, assumindo, por exemplo, que a velocidade do som é constante no corpo humano. Essa abordagem, apesar de eficiente, perde informações importantes presentes nos sinais brutos.
Para avançar além dessas limitações, a NVIDIA, em colaboração com pesquisadores da Siemens Healthineers, desenvolveu o NV-Raw2Insights-US, um modelo de inteligência artificial que aprende diretamente com os dados brutos capturados pelo transdutor de ultrassom, utilizando conhecimento da física envolvida na propagação do som nos tecidos. Essa tecnologia está disponível na plataforma Hugging Face, incluindo código aberto, modelos treinados e datasets.
Como funciona o NV-Raw2Insights-US: da captura do som à imagem personalizada
Ao contrário dos métodos convencionais que trabalham com imagens já reconstruídas, o NV-Raw2Insights-US processa os sinais acústicos originais, permitindo que o modelo "escute" com mais precisão como o som se comporta em cada paciente. Essa abordagem possibilita a criação de mapas personalizados da velocidade do som no corpo, informação crucial para corrigir o foco da imagem em tempo real.
O resultado é um sistema que adapta a imagem ultrassonográfica individualmente, melhorando a clareza e a qualidade do diagnóstico. O processo que antes demandava cálculos complexos e demorados agora é realizado em uma única inferência acelerada por GPU, graças ao uso de inteligência artificial aplicada diretamente aos dados brutos.
Arquitetura e implantação: integração sem complicações com equipamentos existentes
O acesso aos dados brutos em scanners clínicos é limitado devido à alta largura de banda necessária. Para contornar isso, a NVIDIA criou o Holoscan Sensor Bridge (HSB), um IP FPGA open source que permite a transferência rápida e de baixa latência dos dados via RDMA over Converged Ethernet (RoCE). Combinado ao kit de desenvolvimento Altera Agilex-7 e ao protocolo Data over DisplayPort, o HSB captura o fluxo de dados brutos do scanner ACUSON Sequoia e o transmite para um sistema NVIDIA IGX para processamento.
O NV-Raw2Insights-US é executado na plataforma de edge AI NVIDIA Holoscan, que suporta cargas de trabalho em tempo real com alta performance em GPUs da classe Blackwell, como as utilizadas nos sistemas NVIDIA IGX Thor e DGX Spark. A velocidade do som estimada é então devolvida ao scanner, permitindo a correção dinâmica do foco da imagem durante o exame.
Principais vantagens e capacidades do sistema
- Integração apenas por software: aceleração de dispositivos médicos existentes usando modificações via software e Data over DisplayPort, sem necessidade de hardware adicional.
- Ultrassom definido por software: possibilita melhorias contínuas por meio de atualizações, ampliando funcionalidades ao longo do tempo.
- Expansão modular: com os dados brutos já em memória GPU, novos modelos de IA podem ser integrados facilmente para ampliar capacidades diagnósticas.
Impacto e perspectivas futuras
A migração da inteligência do ultrassom de métodos tradicionais para uma pipeline Raw2Insights baseada em IA cria um caminho escalável para imagens nativas de inteligência artificial. Ao aprender diretamente dos dados brutos, o NV-Raw2Insights-US reduz erros introduzidos por suposições simplificadas e adapta a imagem para as características físicas únicas de cada paciente.
Essa arquitetura não apenas melhora a qualidade das imagens atualmente, mas também estabelece uma base modular para o desenvolvimento de sistemas diagnósticos de próxima geração, com potencial para integrar múltiplas modalidades e análises avançadas.
Recursos para desenvolvedores e pesquisadores
- Repositório GitHub do NV-Raw2Insights-US com código e modelos treinados.
- Página do modelo no Hugging Face.
- Dataset para visualização e treinamento.
- Documentação do NVIDIA Holoscan SDK para desenvolvimento de aplicações em edge AI.
- Referências científicas importantes:
O NV-Raw2Insights-US representa um avanço significativo ao levar a ultrassonografia para a era da inteligência artificial personalizada e adaptativa. Embora ainda esteja em fase investigacional e não disponível comercialmente, sua arquitetura aberta e modular abre caminho para que fabricantes e pesquisadores possam explorar e expandir as capacidades da ultrassonografia com IA.
Para interessados em desenvolvimento e experimentação, a NVIDIA e Hugging Face disponibilizam todos os recursos necessários para iniciar projetos baseados nesta tecnologia inovadora.