垃圾回收和Go中指针的正确使用

前言：
我在

github.com/icza/gox

stringsx.Pool

首先介绍一些背景。

string

reflect.StringHeader

type StringHeader struct {        Data uintptr        Len  int}

因此，基本上传递/复制一个

string

string

string

因此，基本上，

string

*string

*string

它起作用了，我的第一个问题是，以这种方式构建映射后，结果数据结构会怎样？图像URL字符串字段是否会以某种方式保留在内存中，其余结果将被垃圾回收？还是结果数据结构会保留在内存中直到程序结束，因为某些内容指向其成员？

如果您有一个指向结构值字段的指针值，则整个结构将保存在内存中，无法进行垃圾回收。请注意，虽然可以释放为该结构的其他字段保留的内存，但是当前的Go运行时和垃圾回收器不会这样做。因此，要获得最佳的内存使用率，您应该忘记存储结构字段的地址（除非您还需要完整的结构值，但是仍然需要特别注意存储字段地址和切片/数组元素地址）。

这样做的原因是因为用于结构值的内存被分配为连续的段，因此仅保留一个引用的字段将严重破坏可用/可用内存，并使最佳内存管理更加困难和效率降低。对这些区域进行碎片整理还需要复制参考字段的存储区域，这将需要“实时更改”指针值（更改存储地址）。

因此，尽管使用指向

string

那该怎么办呢？

因此，最干净的方法是继续使用

string

还有我们之前没有谈到的另一项优化。

您可以通过解组JSON API响应来获得结果。这意味着，如果JSON响应中多次包含相同的URL或标记值，

string

这是什么意思？如果在JSON响应中两次具有相同的URL，则在进行封送处理后，将有2个不同的

string

encoding/json

string

这是一个小应用程序，可以证明这一点：

var s []stringerr := json.Unmarshal([]byte(`["abc", "abc", "abc"]`), &s)if err != nil {    panic(err)}for i := range s {    hdr := (*reflect.StringHeader)(unsafe.Pointer(&s[i]))    fmt.Println(hdr.Data)}

上面的输出（在Go Playground上尝试）：

273760312273760315273760320

我们看到3个不同的指针。它们可能是相同的，因为

string

该

json

string

因此，让我们自己进行字符串实习。怎么做？

解组JSON结果之后，在构建

tagToUrlMap

string

string

这是一个非常简单的字符串内部实现：

var cache = map[string]string{}func interned(s string) string {    if s2, ok := cache[s]; ok {        return s2    }    // New string, store it    cache[s] = s    return s}

让我们在上面的示例代码中测试这个“ interner”：

var s []stringerr := json.Unmarshal([]byte(`["abc", "abc", "abc"]`), &s)if err != nil {    panic(err)}for i := range s {    hdr := (*reflect.StringHeader)(unsafe.Pointer(&s[i]))    fmt.Println(hdr.Data, s[i])}for i := range s {    s[i] = interned(s[i])}for i := range s {    hdr := (*reflect.StringHeader)(unsafe.Pointer(&s[i]))    fmt.Println(hdr.Data, s[i])}

上面的输出（在Go Playground上尝试）：

273760312 abc273760315 abc273760320 abc273760312 abc273760312 abc273760312 abc

精彩！如我们所见，在使用

interned()

"abc"

这里不要忘记的一件事：字符串交互器使用一个

cache

nil

事不宜迟，让我们看看我们的解决方案：

result := searchImages()tagToUrlMap := make(map[string][]string)for _, image := range result {    imageURL := interned(image.URL)    for _, tag := range image.Tags {        tagName := interned(tag.Name)        tagToUrlMap[tagName] = append(tagToUrlMap[tagName], imageURL)    }}// Clear the interner cache:cache = nil

要验证结果：

enc := json.NewEnprer(os.Stdout)enc.SetIndent("", "  ")if err := enc.Enpre(tagToUrlMap); err != nil {    panic(err)}

输出为（在Go Playground上尝试）：

{  "blue": [    "https://c8.staticflickr.com/4/3707/11603200203_87810ddb43_o.jpg"  ],  "bridge": [    "https://c3.staticflickr.com/1/48/164626048_edeca27ed7_o.jpg"  ],  "forest": [    "https://c8.staticflickr.com/4/3707/11603200203_87810ddb43_o.jpg",    "https://c3.staticflickr.com/1/48/164626048_edeca27ed7_o.jpg"  ],  "ocean": [    "https://c8.staticflickr.com/4/3707/11603200203_87810ddb43_o.jpg"  ],  "river": [    "https://c3.staticflickr.com/1/48/164626048_edeca27ed7_o.jpg"  ],  "water": [    "https://c8.staticflickr.com/4/3707/11603200203_87810ddb43_o.jpg",    "https://c3.staticflickr.com/1/48/164626048_edeca27ed7_o.jpg"  ]}

我们使用内置

append()

append()

tagToUrlMap

这是可以做到的：

for tagName, urls := range tagToUrlMap {    if cap(urls) > len(urls) {        urls2 := make([]string, len(urls))        copy(urls2, urls)        tagToUrlMap[tagName] = urls2    }}