Go 语言新提案「arena」:优化内存,速度提升2000% 内存占用降低150% cpu占用降低150%


Go 语言社区正在讨论名为「arena」的新提案。

根据提案的介绍,「Go arena」用于优化内存分配。arena 是一种从连续的内存区域分配一组内存对象的方法,其优点是从 arena 分配对象通常比一般内存分配更有效。更重要的是,arena 中的对象能够用最少的内存管理垃圾回收开销一次释放所有内容。

通常来说,arena 不会在具备垃圾回收的编程语言中实现,因为它们用于显式释放 arena 内存的操作不安全,所以不符合垃圾回收语义。不过此提案的实现使用了动态检查来确保 arena 操作是安全的。此外还保证,如果 arena 操作不安全,程序将在任何不正确的行为发生之前终止。目前 Go 团队已在 Google 内部实现并使用了 arena,结果显示其为许多大型应用程序节省了高达 15% 的 CPU 和内存使用量,这主要是由于垃圾回收 CPU 时间和堆内存使用量的减少。

提案简介

在 Go 标准库中增加一个新的arena包,arena包可用于分配任意数量的 arena,可以从 arena 的内存中分配任意类型的对象,并且 arena 会根据需要自动增长大小。当一个 arena 中的所有对象不再使用时,可以显式释放该 arena 以有效地回收其内存,而无需进行常见的垃圾回收操作。我们要求此实现提供安全检查,如果 arena 操作不安全,程序将在任何不正确的行为发生之前终止。 为了获得最大的灵活性,API 能够分配任何类型的对象和切片,包括可以在运行时通过反射生成的类型。

提案 API:

package arena

type Arena struct {
	// contains filtered or unexported fields
}

// New allocates a new arena.
func New() *Arena

// Free frees the arena (and all objects allocated from the arena) so that
// memory backing the arena can be reused fairly quickly without garbage
// collection overhead.Applications must not call any method on this
// arena after it has been freed.
func (a *Arena) Free()

// New allocates an object from arena a.If the concrete type of objPtr is
// a pointer to a pointer to type T (**T), New allocates an object of type
// T and stores a pointer to the object in *objPtr.The object must not
// be accessed after arena a is freed.
func (a *Arena) New(objPtr interface{})

// NewSlice allocates a slice from arena a.If the concrete type of slicePtr
// is *[]T, NewSlice creates a slice of element type T with the specified
// capacity whose backing store is from the arena a and stores it in
// *slicePtr. The length of the slice is set to the capacity.The slice must
// not be accessed after arena a is freed.
func (a *Arena) NewSlice(slicePtr interface{}, cap int)

arena 用法示例:

import (
	“arena”
	…
)

type T struct {
	val int
}

func main() {
	a := arena.New()
	var ptrT *T
	a.New(&ptrT)
	ptrT.val = 1

	var sliceT []T
	a.NewSlice(&sliceT, 100)
	sliceT[99] .val = 4

	a.Free()
}

相關推薦

2023-07-05

本中有超过 255 位贡献者为 Apache Doris 提交了超过 3500 个优化与修复,欢迎大家下载使用! 下载链接:https://doris.apache.org/download GitHub 源码:https://github.com/apache/doris/tree/branch-2.0 在今年年初举办的 Doris Summit 年度峰会上,我

2022-10-28

Chrome 目前仍然以压倒性的优势占据着浏览器市场占有率第一的位置,虽然占有率很高,但不少用户都认为 Chrome 并不好用;其中不乏内存占用高、耗电量高、隐私保护差,以及困扰国内用户无法同步的问题等,其中内存占用问题

2022-10-11

护隐私,还具有其他众多丰富功能。 主要变化 优化资源使用:内存占用更少、CPU 周期更低 此版本对代码进行了广泛的分析和改进,以修复低效的代码和内存使用。与 3.00 相比,CPU 周期和内存占用分别降低了 50% 和

2023-02-11

护隐私,还具有其他众多丰富功能。 主要变化 优化资源使用:内存占用更少、CPU 周期更低 此版本对代码进行了广泛的分析和改进,以修复低效的代码和内存使用。与 3.00 相比,CPU 周期和内存占用分别降低了 50% 和

2024-07-05

ocks 3.3 在稳定性、计算性能、缓存设计、物化视图、存储优化和 Lakehouse 生态系统等方面进行了全方位的优化和创新。本文将逐一介绍 StarRocks 3.3 的这些新特性,带你深入了解这款强大的数据分析工具如何提升你的数据处理效率

2024-06-22

华为终端BG软件部总裁龚体宣布,下一代编程语言仓颉今日起正式开启预览。 仓颉编程语言官网:https://developer.huawei.com/consumer/cn/cangjie/ 仓颉编程语言作为一款面向全场景应用开发的现代编程语言,通过现代语言特性的集成

2024-10-16

Excelize 是 Go 语言编写的用于操作 Office Excel 文档基础库,基于 ECMA-376,ISO/IEC 29500 国际标准。可以使用它来读取、写入由 Microsoft Excel™ 2007 及以上版本创建的电子表格文档。支持 XLAM / XLSM / XLSX / XLTM / XLTX 等多种文档格式,高度

2024-07-26

析等方面进行了全面更新及改进,同时在倒排索引、查询优化器、查询引擎、存储管理等 10 余方向上完成了若干问题修复,欢迎大家下载使用。 官网下载:https://doris.apache.org/ GitHub 下载:https://github.com/apache/doris/releases/tag/2.1.5

2023-06-17

GraalVM是一个基于OpenJDK的高性能多语言虚拟机,它可以将Java应用编译成本地可执行文件,从而提高启动速度,降低内存占用,减少云资源消耗。GraalVM还支持JavaScript,Python,Ruby,LLVM和WebAssembly等多种语言,并提供了丰富的跨语言

2023-04-08

OpenHarmony 3.2版本标准系统能力进一步完善,支持采用ArkTS语言进行大型应用、原子化服务开发。ArkCompiler的优化、Taskpool机制提升应用运行性能;ArkUI组件及动画能力增强,强化图形渲染能力和系统安全能力,丰富分布式业务开发

2024-07-23

让记忆更鲜活! 性能提升,速度飞跃 首次加载渲染优化: 服务端直接插入页面所需数据,大幅提升管理后台页面首次加载速度 页面缓存机制: 管理后台页面缓存机制,页面切换更流畅,告别等待 Simple Web Server 升级: 降低内

2023-03-23

改进性能和稳定性,也表明 AMD 的驱动程序对某些功能或优化使用了「硬编码」的进程名称列表,而 Yandex 的浏览器并不在该列表中。 Yandex 目前已经联系了 AMD,要求将他们的浏览器也加入列表。只不过要想获得这个优化就必须

2021-12-10

-19 压缩等级导致 Initramfs 出现非常严重的解压时间和内存消耗问题,目前他正在努力进行测试,以为 Ubuntu 重新设计恰当的 initramfs  压缩策略。 Initramfs 全称 init ram filesystem ——是 Linux 一种基于内存的虚拟文件

2022-09-15

在性能、易用性、稳定性等方面均有全面的提升。 性能优化 内存分配器 v3.0 中实现了一个新的内存分配器(co/malloc),它不是通用的内存分配器,在 free 与 realloc 时,需要额外带上原内存块的 size 信息,这在使用时可能有一点