V2EX › vus520 的所有回复 › 第 48 页 / 共 50 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 ... 40 41 42 43 44 45 46 47 48 49 ... 50

❮

❯

2015 年 12 月 5 日

回复了 vus520 创建的主题 › 问与答 › Linux 下遍历大文件每一行的最佳方法，最好是命令

@looyao

我编译了一下， mac 上找不到 sys/inotify.h

不过却找到了这个东西
https://github.com/facebook/watchman

2015 年 12 月 5 日

回复了 vus520 创建的主题 › 问与答 › Linux 下遍历大文件每一行的最佳方法，最好是命令

@skydiver 是的，我的需求跟你说的是一致的。不管文件多大，我每次只处理一行，直接扔给外部程序处理，这里只关注遍历文件的速度，外部程序处理的速度暂时不关注

2015 年 12 月 5 日

回复了 vus520 创建的主题 › 问与答 › Linux 下遍历大文件每一行的最佳方法，最好是命令

@xufang @skydiver 二位这么执着我真是又醉又感动

现在的需求其实是找出每一行数据，交给其它进程数据，现在只是想知道，哪种方式最快最方便最省内存

我依次测试过 cat 再 loop ，试过 awk ，现在的场景是处理 50G 以上的日志文件分析进行抽取。

考虑到生产环境中并没有安装 go ，所以命令是优先的，方便集群中部署。

我正在测试几个命令的效率，回头跟大家 update 下

2015 年 12 月 5 日

回复了 vus520 创建的主题 › 问与答 › Linux 下遍历大文件每一行的最佳方法，最好是命令

@clino tail 可以从头开始遍历一个文件吗，没有找到参数

2015 年 12 月 5 日

回复了 vus520 创建的主题 › 问与答 › Linux 下遍历大文件每一行的最佳方法，最好是命令

@xufang go lang 大法好

2015 年 11 月 18 日

回复了 lizheming 创建的主题 › 程序员 › Github 更新项目主页样式了

上上个版本就跟现在差不多

2015 年 11 月 16 日

回复了 love 创建的主题 › 问与答 › 为什么 UC 浏览器里会内置一个非常好用的盗版小说功能也没人追究的？

看到 t66y ，果断装了 uc 浏览器，你们知道得太多了