谷歌发布开源工具Magika 1.0,核心引擎重写以提升性能

千宇酱_1298

千宇酱_1298

2025-11-07

437人浏览

原创

当地时间周四,谷歌正式宣布,推出其基于人工智能的文件类型检测系统——magika的1.0稳定版本。此次更新最大的亮点在于,其核心引擎已完全采用rust语言进行重写,以实现更高的性能和内存安全性。

据谷歌介绍,自去年初首次开源以来,Magika已在开源社区获得了广泛的应用,其月度下载量已超过100万次。

谷歌发布开源工具Magika 1.0,核心引擎重写以提升性能 - php中文网

性能飞跃与更广泛的文件支持

得益于Rust语言的重构,新版的Magika在性能上实现了巨大的飞跃。其新提供的原生Rust命令行工具,在单核环境下,每秒可识别数百个文件;而在多核CPU上,这一数字更可扩展至每秒数千个。根据谷歌公布的测试数据,在一台MacBook Pro (M4)上,Magika每秒可处理约1000个文件。

谷歌发布开源工具Magika 1.0,核心引擎重写以提升性能 - php中文网

在文件类型的支持方面,Magika 1.0的检测能力已扩展至超过200种文件格式,是初始版本的两倍。此次新增的类别,涵盖了数据科学(如Jupyter Notebooks)、现代编程与网页开发(如Swift, Kotlin, TypeScript)、DevOps与配置文件(如Dockerfile, TOML)以及数据库与图形格式(如SQLite, Photoshop)等多个前沿领域。

Java开发手册免费版
Java开发手册免费版

Java 开发规约速查手册,覆盖命名、异常、并发、数据库等 7 大维度核心规范。

下载

此外,新版本还显著提升了其区分相似格式的能力,例如,它现在可以准确地区分JSONL与JSON、C与C++、JavaScript与TypeScript等容易混淆的文件类型。

谷歌发布开源工具Magika 1.0,核心引擎重写以提升性能 - php中文网

技术挑战与未来展望

在技术实现上,该团队主要克服了两大挑战:一是如何高效地处理超过3TB的庞大训练数据集;二是如何应对部分文件类型样本稀缺的问题。对于前者,谷歌采用了自研的数据集库;而对于后者,研究团队则创造性地使用了生成式AI工具Gemini,来创建高质量的合成训练数据,以增强模型的泛化能力。

谷歌表示,Magika的未来发展,将持续聚焦于性能的优化和文件类型的扩展,并鼓励广大的开发者社区,能够积极参与到该项目的贡献中来。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
Swift iOS架构设计与MVVM模式实战
Swift iOS架构设计与MVVM模式实战

本专题聚焦 Swift 在 iOS 应用架构设计中的实践,系统讲解 MVVM 模式的核心思想、数据绑定机制、模块拆分策略以及组件化开发方法。内容涵盖网络层封装、状态管理、依赖注入与性能优化技巧。通过完整项目案例,帮助开发者构建结构清晰、可维护性强的 iOS 应用架构体系。

2026.03.03

857

16

Swift编程与iOS/macOS应用开发教程合集
Swift编程与iOS/macOS应用开发教程合集

面向苹果生态开发者,系统讲解 Swift 语言核心与 iOS/macOS 应用开发,涵盖 Swift 语法基础、Xcode 开发环境搭建与项目管理、SwiftUI 声明式 UI 开发、UIKit 与 SwiftUI 混合开发策略、Combine 响应式编程框架、数据持久化(SwiftData/Core Data/UserDefaults)、网络请求与 JSON 解析、App 签名/打包/TestFlight 测试与 App Store

2026.06.03

1802

14

TypeScript工程化开发与Vite构建优化实践
TypeScript工程化开发与Vite构建优化实践

本专题面向前端开发者,深入讲解 TypeScript 类型系统与大型项目结构设计方法,并结合 Vite 构建工具优化前端工程化流程。内容包括模块化设计、类型声明管理、代码分割、热更新原理以及构建性能调优。通过完整项目示例,帮助开发者提升代码可维护性与开发效率。

2026.02.13

332

17

TypeScript全栈项目架构与接口规范设计
TypeScript全栈项目架构与接口规范设计

本专题面向全栈开发者,系统讲解基于 TypeScript 构建前后端统一技术栈的工程化实践。内容涵盖项目分层设计、接口协议规范、类型共享机制、错误码体系设计、接口自动化生成与文档维护方案。通过完整项目示例,帮助开发者构建结构清晰、类型安全、易维护的现代全栈应用架构。

2026.02.25

560

17

TypeScript类型系统进阶与大型前端项目实践
TypeScript类型系统进阶与大型前端项目实践

本专题围绕 TypeScript 在大型前端项目中的应用展开,深入讲解类型系统设计与工程化开发方法。内容包括泛型与高级类型、类型推断机制、声明文件编写、模块化结构设计以及代码规范管理。通过真实项目案例分析,帮助开发者构建类型安全、结构清晰、易维护的前端工程体系,提高团队协作效率与代码质量。

2026.03.13

411

19

TypeScript 全栈开发进阶指南
TypeScript 全栈开发进阶指南

面向有 JavaScript 基础的开发者,深入讲解 TypeScript 的类型系统与全栈开发实践。

2026.06.03

346

29

TypeScript Node.js 全栈工程化与Monorepo架构实践
TypeScript Node.js 全栈工程化与Monorepo架构实践

本专题围绕 TypeScript 在 Node.js 全栈开发中的工程化实践展开,系统讲解 Monorepo 架构设计、包管理策略、模块复用机制以及服务端与前端统一类型系统的构建方法。通过真实项目案例,帮助开发者提升大型全栈项目的可维护性与协作效率。

2026.06.16

778

8

Kotlin协程编程与Spring Boot集成实践
Kotlin协程编程与Spring Boot集成实践

本专题围绕 Kotlin 协程机制展开,深入讲解挂起函数、协程作用域、结构化并发与异常处理机制,并结合 Spring Boot 展示协程在后端开发中的实际应用。内容涵盖异步接口设计、数据库调用优化、线程资源管理以及性能调优策略,帮助开发者构建更加简洁高效的 Kotlin 后端服务架构。

2026.02.12

391

18

Java Kotlin协程与异步编程实战
Java Kotlin协程与异步编程实战

本专题围绕 Kotlin 协程与异步编程展开,讲解挂起函数、协程作用域、异步任务调度及并发控制方法。通过实际项目案例,帮助开发者提升后端服务性能,实现高效异步任务处理与稳定性保障。

2026.04.13

199

16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
WebStorm 官方调试文档
WebStorm 官方调试文档

共0课时 | 0人学习

React 教程
React 教程

共58课时 | 12.6万人学习

TypeScript 教程
TypeScript 教程

共19课时 | 6.8万人学习