搜索
首页后端开发Golang使用新的 io.FS 到 fs.WalkDir 并列出跨文件系统类型的文件

使用新的 io.FS 到 fs.WalkDir 并列出跨文件系统类型的文件

php小编草莓推荐使用新的io.FS来操作文件系统,特别是在使用fs.WalkDir并列出跨文件系统类型的文件时。这个新的功能能够更加灵活地处理文件操作,让用户能够更方便地获取需要的文件信息。无论是在开发还是维护过程中,这个功能都能够大大提高效率,减少繁琐的操作。如果你想更深入了解如何使用这个功能,不妨继续阅读下去,我们将为你介绍详细的操作步骤和注意事项。

问题内容

我使用新的 io.FS 抽象来遍历文件系统并读取与我们内部文件扩展名匹配的每个文件的前 128 个字节。

这些文件位于本地文件系统和存档文件等(ZIP 和 Tar I thunk)中。

我正在使用 fs.WalkDir,传入 fs.FS (在我的测试中为 os.DIR 和 fstest.MapFS)。行走时,我返回一组“文件”(实际上它们是 *.pzix 和 *.pzi 文件,它们是我们的专有格式)。我找不到使用 FS 接口获取有关我正在处理的文件的一些信息的合适方法。

我想要:

  • 获取文件名
  • 获取文件大小
  • 获取openfile方法

我发现 Go 中来自 Java/C# 的接口有点令人困惑。我希望对抽象进行操作,但我不知道如何获取文件本身的其他实现(例如,文件接口有 Stat() 和 read)。

我发现的最简单的事情是将路径和文件名存储在数组中,然后当我迭代数组时,确定它是 os.Dir 还是 fstest.MapFS,但这似乎相当违反直觉:

func collectFiles(f fs.FS, root string) []string {
 var files []string
 fs.WalkDir(f, ".", func(p string, d fs.DirEntry, err error) error {
  if !d.IsDir() { // we also check a few other things in the filename here
   f = filepath.Abs(path.Join(root, p))
   files = append(files, f)
  }
 }
 return files
}

这给了我:

root = "m://" // mapfs
files = { "m://id-198271.pzi", "m://id-7125-092581.pzix"}

有没有更聪明的方法让我处理抽象而不做这些事情?因为返回数组后,我必须“打开”文件,读取前 128 个字节(签名)并对文件的其余部分进行哈希处理以确保其“有效”。

编辑:澄清一下, collectFiles 方法正在创建我们的主要文件命中列表,以便在另一种方法中处理。我希望将本地系统文件、zip 文件和 tar 文件传递​​到该方法中,以便它可以迭代存档中的文件并将它们添加到数组中。

希望有一个 File 接口,我可以存储在数组中而不是字符串中,以便后续调用者可以在不知道底层是什么的情况下执行 f.open() 。

解决方法

p 是文件系统中的名称。

通过调用fs.Stat(f, p)获取大小

使用 f.Open(p) 打开文件

示例:

f := os.DirFS("/etc")
fs.WalkDir(f, ".", func(p string, d fs.DirEntry, err error) error {
    if !d.IsDir() {
        st, _ := fs.Stat(f, p)
        r, _ := f.Open(p)
        defer r.Close()

        // Read prefix
        var buf [md5.Size]byte
        n, _ := io.ReadFull(r, buf[:])

        // Hash remainder
        h := md5.New()
        _, _ = io.Copy(h, r)
        s := h.Sum(nil)

        fmt.Printf("%s %d %x %x\n", p, st.Size(), buf[:n], s)
    }
    return nil
})

为了简洁起见,该示例忽略了错误。不要在实际代码中这样做。

https://www.php.cn/link/b599e8250e4481aaa405a715419c8179

以上是使用新的 io.FS 到 fs.WalkDir 并列出跨文件系统类型的文件的详细内容。更多信息请关注PHP中文网其他相关文章!

声明
本文转载于:stackoverflow。如有侵权,请联系admin@php.cn删除
Go语言包导入:带下划线和不带下划线的区别是什么?Go语言包导入:带下划线和不带下划线的区别是什么?Mar 03, 2025 pm 05:17 PM

本文解释了GO的软件包导入机制:命名imports(例如导入“ fmt”)和空白导入(例如导入_ fmt; fmt;)。 命名导入使包装内容可访问,而空白导入仅执行t

Go语言中如何将MySQL查询结果List转换为自定义结构体切片?Go语言中如何将MySQL查询结果List转换为自定义结构体切片?Mar 03, 2025 pm 05:18 PM

本文详细介绍了MySQL查询结果的有效转换为GO结构切片。 它强调使用数据库/SQL的扫描方法来最佳性能,避免手动解析。 使用DB标签和Robus的结构现场映射的最佳实践

Beego框架中NewFlash()函数如何实现页面间短暂信息传递?Beego框架中NewFlash()函数如何实现页面间短暂信息传递?Mar 03, 2025 pm 05:22 PM

本文解释了Beego的NewFlash()函数,用于Web应用程序中的页间数据传输。 它专注于使用newflash()在控制器之间显示临时消息(成功,错误,警告),并利用会话机制。 Lima

如何定义GO中仿制药的自定义类型约束?如何定义GO中仿制药的自定义类型约束?Mar 10, 2025 pm 03:20 PM

本文探讨了GO的仿制药自定义类型约束。 它详细介绍了界面如何定义通用功能的最低类型要求,从而改善了类型的安全性和代码可重复使用性。 本文还讨论了局限性和最佳实践

如何编写模拟对象和存根以进行测试?如何编写模拟对象和存根以进行测试?Mar 10, 2025 pm 05:38 PM

本文演示了创建模拟和存根进行单元测试。 它强调使用接口,提供模拟实现的示例,并讨论最佳实践,例如保持模拟集中并使用断言库。 文章

Go语言如何便捷地写入文件?Go语言如何便捷地写入文件?Mar 03, 2025 pm 05:15 PM

本文详细介绍了在GO中详细介绍有效的文件,将OS.WriteFile(适用于小文件)与OS.openfile和缓冲写入(最佳大型文件)进行比较。 它强调了使用延迟并检查特定错误的可靠错误处理。

您如何在GO中编写单元测试?您如何在GO中编写单元测试?Mar 21, 2025 pm 06:34 PM

本文讨论了GO中的编写单元测试,涵盖了最佳实践,模拟技术和有效测试管理的工具。

如何使用跟踪工具了解GO应用程序的执行流?如何使用跟踪工具了解GO应用程序的执行流?Mar 10, 2025 pm 05:36 PM

本文使用跟踪工具探讨了GO应用程序执行流。 它讨论了手册和自动仪器技术,比较诸如Jaeger,Zipkin和Opentelemetry之类的工具,并突出显示有效的数据可视化

See all articles

热AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover

AI Clothes Remover

用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool

Undress AI Tool

免费脱衣服图片

Clothoff.io

Clothoff.io

AI脱衣机

AI Hentai Generator

AI Hentai Generator

免费生成ai无尽的。

热门文章

R.E.P.O.能量晶体解释及其做什么(黄色晶体)
2 周前By尊渡假赌尊渡假赌尊渡假赌
仓库:如何复兴队友
4 周前By尊渡假赌尊渡假赌尊渡假赌
Hello Kitty Island冒险:如何获得巨型种子
3 周前By尊渡假赌尊渡假赌尊渡假赌

热工具

SublimeText3 Mac版

SublimeText3 Mac版

神级代码编辑软件(SublimeText3)

SublimeText3 Linux新版

SublimeText3 Linux新版

SublimeText3 Linux最新版

SecLists

SecLists

SecLists是最终安全测试人员的伙伴。它是一个包含各种类型列表的集合,这些列表在安全评估过程中经常使用,都在一个地方。SecLists通过方便地提供安全测试人员可能需要的所有列表,帮助提高安全测试的效率和生产力。列表类型包括用户名、密码、URL、模糊测试有效载荷、敏感数据模式、Web shell等等。测试人员只需将此存储库拉到新的测试机上,他就可以访问到所需的每种类型的列表。

WebStorm Mac版

WebStorm Mac版

好用的JavaScript开发工具

SublimeText3 英文版

SublimeText3 英文版

推荐:为Win版本,支持代码提示!