はじめに

この資料は Rust 製のコマンドラインツール rust-parallel について紹介するものです。

Rustの環境構築やツールのインストール方法については以下を参照してください

rust-parallel について

コマンドを並列に実行し、その出力を集計するコマンドラインユーティリティです。

GNU Parallel や xargs に似たインタフェースです、

xargs の -n1 や -L1 オプションと同様に、各入力行に対して常に 1 プロセスを実行します。

Rust と tokio で実装されていて、非同期で処理されるため、非常に高速です。

安全なRustだけで実装
tokioがサポートする非同期操作だけを使用し、ブロッキング操作は使用しない。これにはstdout/stderrへの書き込みも含まれる。
任意の数の入力行をサポートし、O(n) （n=入力行数）のメモリ使用量を回避する。
tokio::sync::Semaphore を注意深く使用し、同時実行するコマンドの数を制限する。メモリ使用量を制限するために、すべての入力行に対してすぐにタスクを発生させないようにする。
リモートマシンではなく、ローカルマシン上でのみコマンドを実行できるようにする。

rust-parallel [OPTIONS] [COMMAND_AND_INITIAL_ARGUMENTS]...