database - Golang 代码的运行速度真的比 PHP 中的相同代码慢

标签 database go performance-testing

Golang 新手,昨天我开始使用 Golang 并编写了一些实际用 PHP 编写的代码。我只是想看看性能上的差异。

我在 PHP 中做完全相同的事情,响应在 http 请求中完全相同,但 Golang 的执行速度非常慢,即使在编译之后也是如此。

我试图了解我在 Golang 中使用的哪些东西不应该使用,以及我如何才能提高这段代码的性能。

我知道遍历映射很慢,但是 PHP 使用散列映射来实现多维数组。我可以保证我使用的 sql 查询是从 PHP 粘贴的完全相同的副本,机器相同,并且两个代码中的循环数相同。

package main

import (
    "database/sql"
    "encoding/json"
    "fmt"
    _ "github.com/go-sql-driver/mysql"
    "net/http"
    "reflect"
    "strings"
)

func main() {
    db, err := sql.Open("mysql", "***:****@tcp(****:3306)/****")
    fmt.Println(reflect.TypeOf(db))
    checkErr(err)
    fmt.Println("Handle Request setup... OK")
    http.HandleFunc("/", func(w http.ResponseWriter, req *http.Request) {

        jsonData, err := getListings(db)
        checkErr(err)

        w.Write([]byte(jsonData))

    })
    fmt.Println("Starting Server....")
    fmt.Println("Listening on port 8081")
    http.ListenAndServe(":8081", nil)

}

func getListings(db *sql.DB) ([]byte, error) {
    var userId string = "142"

    normalListings := sqlToArray(db, `******`)

    manualListings := sqlToArray(db, "******")

    var groupIds []string
    for key := range manualListings {

        groupId := "142," + manualListings[key]["group_id"]
        if !stringInSlice(groupId, groupIds) {
            groupIds = append(groupIds, groupId)
        }
    }

    var groupIdsString string
    groupIdsString = strings.Join(groupIds, ", ")

    manualGroups := sqlToArray(db, "*****")

    for key := range manualListings {

        for key2 := range manualGroups {
            groupId := "142," + manualListings[key]["group_id"]

            if groupId == manualGroups[key]["ticket_id"] {
                entry := make(map[string]string)
                entry["ticket_id"] = manualListings[key]["listing_id"]
                entry["date_created"] = manualGroups[key2]["date_created"]
                normalListings = append(normalListings, entry)

            }
        }
    }

    return json.Marshal(normalListings)

}

func stringInSlice(a string, list []string) bool {
    for _, b := range list {
        if b == a {
            return true
        }
    }
    return false
}

func sqlToArray(db *sql.DB, sqlString string) []map[string]string {

    rows, err := db.Query(sqlString)
    checkErr(err)
    columns, err := rows.Columns()
    count := len(columns)
    values := make([]interface{}, count)
    valuePtrs := make([]interface{}, count)
    tableData := make([]map[string]string, 0)

    for rows.Next() {

        for i := 0; i < count; i++ {
            valuePtrs[i] = &values[i]
        }
        rows.Scan(valuePtrs...)
        entry := make(map[string]string)
        for i, col := range columns {

            val := values[i]
            b, ok := val.([]byte)
            if ok {
                entry[col] = string(b)
            } else {
                entry[col] = string(b)
            }

        }
        tableData = append(tableData, entry)

    }

    return tableData

}

func checkErr(err error) {
    if err != nil {
        panic(err)
    }
}

编辑: 将代码更改为使用静态类型结构而不是使用映射,并确定了有问题的代码段

新代码:

package main

import (
    "database/sql"
    "encoding/json"
    "fmt"
    _ "github.com/go-sql-driver/mysql"
    "net/http"
    "strings"
)

type listingsType struct {
    TicketId    string
    DateCreated string
}

func main() {
    db, err := sql.Open("mysql", "******")

    checkErr(err)
    fmt.Println("Handle Request setup... OK")
    http.HandleFunc("/", func(w http.ResponseWriter, req *http.Request) {

        jsonData, err := getListings(db)
        checkErr(err)

        w.Write([]byte(jsonData))

    })
    fmt.Println("Starting Server....")
    fmt.Println("Listening on port 8081")
    http.ListenAndServe(":8081", nil)

}

func getListings(db *sql.DB) ([]byte, error) {
    var userId string = "142"

    normalListings := sqlToArray(db, `*****`)

    manualListings := sqlToArray(db, "*****")

    var groupIds []string

    for _, elem := range manualListings {
        groupId := "142," + elem.DateCreated
        if !stringInSlice(groupId, groupIds) {
            groupIds = append(groupIds, groupId)
        }

    }

    var groupIdsString string
    groupIdsString = strings.Join(groupIds, ", ")
    fmt.Println(groupIdsString)
    manualGroups := sqlToArray(db, "******")

    for _, manualList := range manualListings {

        for _, manualGroup := range manualGroups {
            groupId := "142," + manualList.DateCreated

            if groupId == manualGroup.TicketId {
                var entry listingsType
                entry.TicketId = manualList.TicketId
                entry.DateCreated = manualGroup.DateCreated
                normalListings = append(normalListings, entry)

            }
        }
    }

    return json.Marshal(normalListings)

}

func stringInSlice(a string, list []string) bool {
    for _, b := range list {
        if b == a {
            return true
        }
    }
    return false
}

func sqlToArray(db *sql.DB, sqlString string) []listingsType {

    rows, err := db.Query(sqlString)
    checkErr(err)

    tableData := []listingsType{}

    for rows.Next() {

        var entry listingsType
        rows.Scan(&entry.TicketId, &entry.DateCreated)

        tableData = append(tableData, entry)

    }

    return tableData

}

func checkErr(err error) {
    if err != nil {
        panic(err)
    }
}

有问题的代码段 一旦我注释了以下代码块,我的代码就执行得很好。

知道这个循环有什么问题吗?

for _, manualList := range manualListings {

        for _, manualGroup := range manualGroups {
            groupId := "142," + manualList.DateCreated

            if groupId == manualGroup.TicketId {
                var entry listingsType
                entry.TicketId = manualList.TicketId
                entry.DateCreated = manualGroup.DateCreated
                normalListings = append(normalListings, entry)

            }
        }
    }

分析结果

enter image description here

最佳答案

好的,顺便修好了。我将请求时间从 5k+ MS 提高到 500 MS,现在我的 PHP 代码终于变慢了 900 MS

我通过实现一个单独的函数来获取 map 键值中不同数据结构中的 SQL 数据而不是搜索整个数组我创建了我在数组中寻找的值作为键,从而摆脱了内部循环进行搜索,通过这种方式,我摆脱了第二个循环,它因对字符串进行线性搜索而造成麻烦。

manualGroups := sqlToArraySpecial(db, "****")

    for _, manualList := range manualListings {
        //index := stringInSliceArray(manualList.DateCreated, manualGroups)
        groupId := "142," + manualList.DateCreated
        var entry listingsType
        entry.TicketId = manualList.TicketId
        entry.DateCreated = manualGroups[groupId]
        normalListings = append(normalListings, entry)

    }

这是我的新 SQL 函数

func sqlToArraySpecial(db *sql.DB, sqlString string) map[string]string {

    rows, err := db.Query(sqlString)
    checkErr(err)

    tableData := make(map[string]string)

    for rows.Next() {

        var date_created string
        var ticket_id string

        rows.Scan(&ticket_id, &date_created)
        //fmt.Println(ticket_id)
        tableData[ticket_id] = date_created

    }

    return tableData

}

关于database - Golang 代码的运行速度真的比 PHP 中的相同代码慢,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/39437216/

相关文章:

go - 转到httprouter自定义中间件

go - 运算符 > 未为 T 定义

mysql - 连接两个数据库表 zend framework 1.12

arrays - 遍历 Go 中的任意可迭代数据结构

Excel 作为数据库,从文本框搜索并相应地向特定文本框显示信息 VB.NET

javascript - 在 VueJS 中如何判断某个元素是否已重新渲染?

c++ - set vs unordered_set vs 排序 vector

ruby-on-rails - 如何设置 RSpec 进行性能测试 'on the side'

mysql - 创建mysql数据库结构的建议

c# - 在pdf文件中隐藏datagridview的列