首页  >  问答  >  正文

linux - Ubuntu 下合并大批量文件,有没有高效的方法?

PHP中文网PHP中文网2764 天前391

全部回复(2)我来回复

  • PHP中文网

    PHP中文网2017-04-17 16:41:33

    可以试试使用命令paste将大量文件合并:paste -d 'n' -s packages/*.txt > combine.txt

    其实,原始文件切分并处理在一些情况下并不需要真正切分成大量的小文件之后才处理,可以利用较新版本的split命令配合选项--filter=COMMAND直接在原始文件上进行处理,并将处理结果直接写入文件combine.txt。

    这样就省去了切分和合并的过程。

    回复
    0
  • PHP中文网

    PHP中文网2017-04-17 16:41:33

    你解题思路一定是错了,从未见过要把文件切分成几十万份的。

    回复
    0
  • 取消回复