加入收藏 | 设为首页 | 会员中心 | 我要投稿 PHP编程网 - 黄冈站长网 (http://www.0713zz.com/)- 数据应用、建站、人体识别、智能机器人、语音技术!
当前位置: 首页 > 服务器 > 搭建环境 > Linux > 正文

linux – 如何在文件中查找特定行的字节位置

发布时间:2021-01-01 22:34:32 所属栏目:Linux 来源:网络整理
导读:从命令行中查找文件中特定行的字节位置的最快方法是什么? 例如 $linepos myfile.txt 135283 我正在为一个大小为几GB的CSV编写一个解析器,如果解析器被暂停,我希望能够从最后一个位置恢复.解析器是在Python中,但即使在file.readlines()上进行迭代也需要很

从命令行中查找文件中特定行的字节位置的最快方法是什么?

例如

$linepos myfile.txt 13
5283

我正在为一个大小为几GB的CSV编写一个解析器,如果解析器被暂停,我希望能够从最后一个位置恢复.解析器是在Python中,但即使在file.readlines()上进行迭代也需要很长时间,因为文件中有数百万行.我想简单地做file.seek(int(command.getoutput(“linepos myfile.txt%i”%lastrow))),但我找不到shell命令来有效地执行此操作.

编辑:很抱歉混乱,但我正在寻找一个非Python解决方案.我已经知道如何从Python中做到这一点.

解决方法

来自@ chepner对我的另一个答案的评论:
position = 0  # or wherever you left off last time
try:
    with open('myfile.txt') as file:
        file.seek(position)  # zero in base case
        for line in file:
            position = file.tell() # current seek position in file
            # process the line
except:
    print 'exception occurred at position {}'.format(position)
    raise

(编辑:PHP编程网 - 黄冈站长网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

    热点阅读