登录 注册
当前位置:主页 > 资源下载 > 50 > 通过实际操作案例掌握parallel并行命令,从而利用多核CPU提升Linux命令执行速度

通过实际操作案例掌握parallel并行命令,从而利用多核CPU提升Linux命令执行速度

  • 更新:2024-06-02 14:51:44
  • 大小:1.23MB
  • 推荐:★★★★★
  • 来源:网友上传分享
  • 类别:Linux - 操作系统
  • 格式:PDF

资源介绍

你是否曾经有过要计算一个非常大的数据(几百GB)的需求?或在里面搜索,或其它操作——一些无法并行的操作。数据专家们,我是在对你们说。你可能有一个16核或更多核的CPU,但我们合适的工具,例如 grep, bzip2, wc, awk, sed等等,都是单线程的,只能使用一个CPU内核。我们需要用到GNU Parallel命令,它让我们所有的CPU核心在单机内做神奇的map-reduce操作,当然,这还要借助很少用到的–pipes 参数(也叫做–spreadstdin)。这样,你的负载就会平均分配到各CPU上,真的。