http - ISO-8859-1 编码网站中的变音符号

Question

我非常简单的代码片段:

import "net/http"
import "io"
import "os"

func main() {
  resp, err := http.Get("http://example.com")
  if err == nil {
    io.Copy(os.Stdout, resp.Body)
  }
}

当 example.com 是 charset=iso-8859-1 编码时，我的输出是错误的。例如，变音符号显示不正确:

Hällo Wörld --> H?llo W?rld

正确显示变音符号的好的解决方案是什么？

Answer 1

您可以使用包 golang.org/x/net/html/charset确定网站的编码，并创建一个将内容转换为 UTF-8 的阅读器。

下面是一个工作示例:

package main

import (
    "io"
    "net/http"
    "os"

    "golang.org/x/net/html/charset"
)

func main() {
    resp, err := http.Get("http://example.com")
    if err != nil {
        os.Exit(1)
    }

    r, err := charset.NewReader(resp.Body, resp.Header.Get("Content-Type"))
    if err != nil {
        os.Exit(1)
    }

    io.Copy(os.Stdout, r)
}