搜索
首页后端开发Golanggolang 中带有切片的并发映射

golang 中带有切片的并发映射

php小编香蕉带来了一篇精彩的文章,讲述了golang中切片的并发映射。在这篇文章中,我们将了解如何在并发环境中使用切片进行映射操作,并解释了为什么切片在并发编程中非常有用。通过使用golang的并发机制,我们可以在多个goroutine中同时访问和修改切片,从而提高程序的性能和效率。无论你是初学者还是有经验的golang开发者,这篇文章都将给你带来有价值的知识和实践技巧。让我们一起来探索golang中带有切片的并发映射吧!

问题内容

在该领域的一位开发人员几个月前离开后,我一直在尝试解决并发问题,但我找不到解决此问题的适当方法。

对于上下文,我们将客户数据加载到如下结构中:

[ 键 ] -> { 值 }

[客户特定哈希] -> {数据点/文件切片}

示例 - 格式确实很糟糕,抱歉:

[a60d849ad97bfb833e1096941] 
-> 
{ 
 { StartDate: '01-02-2022', EndDate: '28-02-2022', DataFrames: [1598,921578,12981,21749,192578...]},
 { StartDate: '01-03-2022', EndDate: '28-03-2022', DataFrames: [1234,1567,6781,126978...]},
}

以上是因为我们有 100,000 名客户,并且每天晚上都会启动一个流程,根据每个客户的哈希值(或实际上是一个存储桶)来整合数据。在处理数据帧之前,我们会遍历切片并将数据帧“合并”成一个大的数据帧,其中包含许多法律/会计规则。

它在 goroutine 中运行,以尽快索引所有数据点。

所以实现本质上是一个 sync.Map[string, []DataFrame] 但我注意到虽然映射操作受到保护,但附加到数据帧切片却不受保护。每个哈希值每晚在该切片中可能有大约 20-30 个文件引用。

在过去的两年里,客户数据很有可能被错误地合并,我的任务是修复它。在sync.map之前,他们再次使用了带有Map的RWMutex,但不是切片,它指向本文作为指南。

首先,包含切片的 Map 的想法是适当的数据结构吗?

我尝试创建一个基于 RWMutex 的切片处理程序,但想知道 Map 是否可以有一个 chan DataFrame 来代替在索引客户文件时放入,然后一旦完成,第二步将其合并到一个数组中(如len(chanx)) 会被知道吗?

我主要来自 Java,所以我可能对一些术语感到困惑,所以我很抱歉。

解决方法

您有两个不同的问题:

  1. 更新地图时出现并发问题
  2. 更新地图条目时出现并发问题

sync.Map 将防止 1,但不能防止 2。

解决这个问题的一种方法是:

sync.Map[string, *DFrame]

哪里

type DFrame struct {
  sync.RWMutex 
  Data []DataFrame
}

一旦从地图中获取条目,您应该 LockRLock 它,然后使用数据。这不仅仅限于切片的附加。即使您只从数据帧中读取,您也必须 RLock 该结构。

因此,如果您要附加新的数据框:

df := &DFrame{}
entry,_:=m.LoadOrStore(key, df)
dfEntry:=entry.(*DFrame)
dfEntry.Lock()
dfEntry.Data=append(dfEntry.Data, newDataFrame)
dfEntry.Unlock()

以上是golang 中带有切片的并发映射的详细内容。更多信息请关注PHP中文网其他相关文章!

声明
本文转载于:stackoverflow。如有侵权,请联系admin@php.cn删除
Golang chromedp dockerfileGolang chromedp dockerfileFeb 09, 2024 am 10:09 AM

我有一个golang代码,它使用chromedp连接到用户的本地chrome这是我的代码:packagemainimport("context""fmt""log""os""time""github.com/chromedp/chromedp""github.com/gin-gonic/gin")funcmain(){api:=gin.default()api.get("api

Golang Fiber 模板引擎 HTML:渲染:模板不存在Golang Fiber 模板引擎 HTML:渲染:模板不存在Feb 11, 2024 pm 12:30 PM

在我的ubuntu22.10digitalocean服务器上,我正在尝试使用golang和fiber以及html模板引擎。到目前为止很喜欢它。一切正常,包括mysql连接和发送电子邮件。除了一件事。我不断收到错误渲染:模板索引不存在。文件系统:├──/gogo├──main├──main.go├──go.mod├──go.sum├──/views└──index.html└──/public

如何解决 Golang 中的错误“ORA-00911:无效字符”?如何解决 Golang 中的错误“ORA-00911:无效字符”?Feb 08, 2024 pm 09:39 PM

我在调用以下函数时遇到错误“ORA-00911:无效字符”。如果我使用带有硬编码值的SQL查询(截至目前,它已在下面的代码片段中注释掉),那么我可以在邮递员中以JSON响应获取数据库记录,没有任何问题。所以,看起来我的论点做错了。仅供参考,我正在使用“github.com/sijms/go-ora/v2”包连接到oracledb。另外,“DashboardRecordsRequest”结构位于数据模型包中,但我已将其粘贴到下面的代码片段中以供参考。请注意,当我进行POC时,我们将使用存

在Mac电脑上设置和安装Golang开发环境的步骤在Mac电脑上设置和安装Golang开发环境的步骤Feb 24, 2024 pm 04:30 PM

Mac电脑是许多开发者钟爱的工作平台,而Golang作为一种高效的编程语言,也受到了越来越多人的喜爱。本文将详细介绍如何在Mac电脑上配置和安装Golang的开发环境,同时提供具体的代码示例,帮助读者快速入门和使用Golang进行开发。步骤一:下载Golang安装包首先,我们需要从Golang官方网站(https://golang.org/dl/)下载适用于

学习Golang开发:详细步骤解析及从零起步学习Golang开发:详细步骤解析及从零起步Jan 23, 2024 am 08:06 AM

从零开始学习Golang开发:详细步骤解析,需要具体代码示例随着互联网的快速发展,编程语言也在不断地涌现出来。其中一种备受瞩目的语言就是Go语言,简称Golang。Golang是由Google开发的一种静态类型、编译型的高性能编程语言,它的设计目标是提供一种简单、高效、可靠的开发语言。对于初学者来说,从零开始学习Golang开发可能会感到困惑和畏惧。本文将按

减法聚合 Mongo 文档 Golang减法聚合 Mongo 文档 GolangFeb 08, 2024 pm 09:05 PM

我在mongo中有这个文档{"_id":{"$oid":"649d3d688a1f30bf82e77342"},"test_value":{"$numberlong":"10"}}我想用这个golang代码将“test_value”减一jsonInput:=[]map[string]interface{}{{"$match":map[string]interface{}{

golang 中带有切片的并发映射golang 中带有切片的并发映射Feb 11, 2024 am 09:57 AM

在该领域的一位开发人员几个月前离开后,我一直在尝试解决并发问题,但我找不到解决此问题的适当方法。对于上下文,我们将客户数据加载到如下结构中:[键]->{值}[客户特定哈希]->{数据点/文件切片}示例-格式确实很糟糕,抱歉:[a60d849ad97bfb833e1096941]->{{StartDate:'01-02-2022',EndDate:'28-02-2022',DataFrames:[1598,921578,12981,21749,1925

从 Golang 中的 /proc/meminfo 中提取内存和交换信息从 Golang 中的 /proc/meminfo 中提取内存和交换信息Feb 12, 2024 pm 06:24 PM

我想从golang中的/proc/meminfo中提取memtotal、memfree、memavailable、swaptotal和swapfree的值。到目前为止,我得到的最接近的是使用fmt.sscanf(),它将一次给出我想要的值,但我也得到了许多带有零的输出行。这是我正在使用的代码:packagemainimport("bufio""fmt""os")funcmain(){f,e:=os.open("/proc

See all articles

热AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover

AI Clothes Remover

用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool

Undress AI Tool

免费脱衣服图片

Clothoff.io

Clothoff.io

AI脱衣机

AI Hentai Generator

AI Hentai Generator

免费生成ai无尽的。

热门文章

R.E.P.O.能量晶体解释及其做什么(黄色晶体)
2 周前By尊渡假赌尊渡假赌尊渡假赌
仓库:如何复兴队友
1 个月前By尊渡假赌尊渡假赌尊渡假赌
Hello Kitty Island冒险:如何获得巨型种子
4 周前By尊渡假赌尊渡假赌尊渡假赌

热工具

Dreamweaver Mac版

Dreamweaver Mac版

视觉化网页开发工具

SublimeText3汉化版

SublimeText3汉化版

中文版,非常好用

SublimeText3 Mac版

SublimeText3 Mac版

神级代码编辑软件(SublimeText3)

SublimeText3 英文版

SublimeText3 英文版

推荐:为Win版本,支持代码提示!

DVWA

DVWA

Damn Vulnerable Web App (DVWA) 是一个PHP/MySQL的Web应用程序,非常容易受到攻击。它的主要目标是成为安全专业人员在合法环境中测试自己的技能和工具的辅助工具,帮助Web开发人员更好地理解保护Web应用程序的过程,并帮助教师/学生在课堂环境中教授/学习Web应用程序安全。DVWA的目标是通过简单直接的界面练习一些最常见的Web漏洞,难度各不相同。请注意,该软件中