关于GO逐行读取大文件的问题，Go为什么耗费时间是PHP7的8倍？

[lixuancn]

最近写了个脚本，作为学习Go以来第一个实战。但是效果不理想。

一个文件。13G。逐行读取，将读取到的内容按空格切割为数组，取数组中Key＝8的值累加。最后得到这个累加的值。

很简单的文件处理程序。Go和PHP都是单线程顺序执行。

虽然PHP是最好的语言，但是Go作为编译型强类型语言，在我的认知里要比PHP快得多才对，就像C的速度是PHP5的1000倍。可现在Go为什么会出现这样的结果？

Go用了300秒，PHP5.6用了200秒，PHP7用了47秒。我是真的不敢相信这就是Google大力推广的Go。我宁愿相信这是我代码的问题

代码：http://www.oschina.net/question/938918_2145778

我周围没什么懂Go的人，问都不知道问谁了。国内社区基本很难获得理想的答案。请赐教！

[liaosiwei]

从你的程序上来看你既使用了slice又使用了string，应该会给GC带来不少压力，建议你全部使用slice试试。

[astaxie]

这个题目是我用来培训新人的，可以让大家好好用用Go的pprof。

[lixuancn]

@astaxie

1、其实就60行，除了main之外就只有func。
2、其实不用测也知道瓶颈在IO。

[liaosiwei]

不一定，你还是用pprof跑一下吧

[lixuancn]

pprof的top和svg就一行。。

4.57mins of 4.57mins total ( 100%)
flat flat% sum% cum cum%
4.57mins 100% 100% 4.57mins 100%

[lixuancn]

@liaosiwei 我之前跑了，就完全没有可用的信息。可能我的方式不对吧

[astaxie]

你是神马系统？还有你怎么跑的？怎么搞pprof的？

[lixuancn]

Mac....

在main函数的开头加了：
f, _ := os.Create("profile_file")
pprof.StartCPUProfile(f)
defer pprof.StopCPUProfile()

[astaxie]

Mac系统的cpupprof是有问题的，golang/go#6047

[lixuancn]

@astaxie
CentOS 6.2 一样的。都是只有一行。

[lixuan-it@nsctrl1 ~/workspace/gocode/src/letv_dlleak]$ go tool pprof profile_file
Entering interactive mode (type "help" for commands)
(pprof) top5
6.47mins of 6.47mins total ( 100%)
flat flat% sum% cum cum%
6.47mins 100% 100% 6.47mins 100%
(pprof)

[astaxie]

那可能是你的pprof没写对

[wheelcomplex]

从go profile看，是strings.Fields函数效率不高引起。