Em um movimento definido para redefinir a avaliação de desempenho da inteligência artificial (IA), a Primate Labs lançou Geekbench AI 1.0, uma ferramenta de benchmarking projetada para avaliar AI capacidades em vários dispositivos e plataformas. Este lançamento transformador marca a evolução do anteriormente conhecido Geekbench ML (aprendizado de máquina) em uma user-friendly AI suíte de testes.
Geekbench, um nome conhecido no mundo do benchmarking, é conhecido há muito tempo por sua avaliação abrangente de CPUs e GPUs, fornecendo aos usuários pontuações de desempenho claras e comparativas. Essas pontuações tornaram-se um elemento básico em análises de produtos e materiais de marketing, capacitando consumidores e profissionais a avaliar o desempenho de seus dispositivos em cenários do mundo real, desde jogos e criação de conteúdo para desenvolvimento de software.
Com o lançamento do Geekbench AI 1.0, o Primate Labs visa trazer a mesma abordagem padronizada para medir AI desempenho em várias plataformas e dispositivos. O benchmark avalia o quão bem um dispositivo lida com o mundo real aprendizado de máquina tarefas usando CPU, GPU e NPU (unidade de processamento neural) capacidades. Ao integrar dez diferentes AI cargas de trabalho que imitam de perto os casos de uso do mundo real, Geekbench AI fornece uma avaliação holística do desempenho do dispositivo em áreas como visão computacional e processamento de linguagem natural.
Um dos principais pontos fortes do Geekbench AI reside na sua abordagem multidimensional para avaliar AI desempenho. O benchmark utiliza três pontuações distintas: Precisão única, meia precisão e quantizada. Essas pontuações oferecem informações valiosas sobre o desempenho de diferentes componentes de hardware em vários níveis de desempenho. precisão dos dados, desde tarefas de alto desempenho que exigem resultados exatos até aquelas que toleram menos precisão.
Geekbench AI vai além da mera avaliação de velocidade, medindo a precisão juntamente com o desempenho. Isso garante que o benchmark forneça uma visão abrangente da confiabilidade com que um modelo alcança resultados corretos, em vez de focar apenas na velocidade de conclusão da tarefa.
Geekbench AI possui uma gama impressionante de compatibilidade, suportando múltiplos AI estruturas em todas as plataformas. Isso inclui OpenVINO e ONNX no Windows, Core ML em dispositivos Apple e TensorFlow Lite Delegates específicos do fornecedor no Android. Esse amplo suporte permite que desenvolvedores e usuários avaliem AI desempenho em vários configurações de hardware e software, facilitando a tomada de decisões informadas e os esforços de otimização.
Para garantir comparações justas e evitar ajustes de desempenho, todas as cargas de trabalho no Geekbench AI funcionar por no mínimo um segundo. Isso permite que os dispositivos atinjam seu desempenho máximo antes que os resultados sejam registrados, proporcionando um reflexo mais preciso das capacidades do mundo real.
O lançamento do Geekbench AI marca um marco significativo em AI avaliação de desempenho. Ao fornecer aos usuários uma ferramenta padronizada e multiplataforma para avaliar AI capacidades, Laboratórios Primatas está capacitando indivíduos e organizações a tomar decisões informadas sobre seus investimentos em dispositivos e otimizar seus AI workflows.
Geekbench AI 1.0 agora está disponível para download nas plataformas Windows, macOS, Linux, Android e iOS. À medida que os usuários começam a explorar os recursos desta ferramenta, espera-se que ela esclareça o desempenho no mundo real de dispositivos que dependem fortemente da IA no dispositivo, como PCs Copilot Plus e os smartphones mais recentes.
Enquanto os benchmarks tradicionais se concentram em métricas como taxas de quadros e tempos de carregamento, o Geekbench AI introduz um novo paradigma na avaliação de desempenho. Ao avaliar a precisão do texto preditivo ou os resultados gerados por Software de edição de imagens baseado em IA, esta ferramenta abre novos caminhos para a compreensão e otimização AI desempenho.
BONUS: Receba nossos $ 200 “AI “Kit de ferramentas de domínio” GRÁTIS ao se inscrever!
