java - Golang 中的拆分器

Question

下面是Java代码，我在Go中需要类似的东西:

List<String> tokens = Lists.newArrayList(Splitter.on(CharMatcher.anyOf("[]//"))
.trimResults().omitEmptyStrings().split(entry.getValue()))

这是我试过的:

re := regexp.MustCompile(`[//]`)
tokens := re.Split(entry, -1)

Answer 1

使用正则表达式通常比手动操作慢。由于任务并不复杂，因此非正则表达式解决方案也不复杂。

您可以使用 strings.FieldsFunc()在一组字符上拆分字符串，以及 strings.TrimSpace()去除前导和尾随空格。

这是一个简单的函数，可以执行您想要的操作:

func split(s, sep string) (tokens []string) {
    fields := strings.FieldsFunc(s, func(r rune) bool {
        return strings.IndexRune(sep, r) != -1
    })
    for _, s2 := range fields {
        s2 = strings.TrimSpace(s2)
        if s2 != "" {
            tokens = append(tokens, s2)
        }
    }
    return
}

测试它:

fmt.Printf("%q\n", split("a,b;c, de; ; fg ", ",;"))
fmt.Printf("%q\n", split("a[b]c[ de/ / fg ", "[]/"))

输出(在 Go Playground 上尝试):

["a" "b" "c" "de" "fg"]
["a" "b" "c" "de" "fg"]

改进

如果性能是一个问题并且您必须多次调用此 split() 函数，那么从分隔符创建一个类似集合的映射并重用它会是有利可图的，所以在里面传递给 strings.FieldFunc() 的函数，您可以简单地检查 rune 是否在此映射中，因此您不需要调用 strings.IndexRune( ) 来决定给定的 rune 是否是分隔符。

如果您的分隔符很少(例如 1-3 个字符)，性能提升可能并不显着，但如果您有更多分隔符，则使用 map 可以显着提高性能。

它可能是这样的:

var (
    sep1 = map[rune]bool{',': true, ';': true}
    sep2 = map[rune]bool{'[': true, ']': true, '/': true}
)

func split(s string, sep map[rune]bool) (tokens []string) {
    fields := strings.FieldsFunc(s, func(r rune) bool {
        return sep[r]
    })
    for _, s2 := range fields {
        s2 = strings.TrimSpace(s2)
        if s2 != "" {
            tokens = append(tokens, s2)
        }
    }
    return
}

测试它:

fmt.Printf("%q\n", split("a,b;c, de; ; fg ", sep1))
fmt.Printf("%q\n", split("a[b]c[ de/ / fg ", sep2))

输出是一样的。在 Go Playground 上试试这个.