each 0.0.6

Each是一个用于运行健壮、并行、带有良好反馈机制的for循环的shell命令。

它针对“中等规模”的实验进行了优化，这些实验规模太小且过于临时，无法在适当的集群上运行（或者也许您根本就没有适当的集群。我没有），但足够慢，以至于从头开始重新启动它们会非常痛苦，理想情况下，并行性足够高，如果您恰好有一个十六核心的服务器可以运行它们，您真的希望使用所有十六个核心。

each的主要用途是以下bash for循环的一个更健壮的版本

for f in "$source"/* ; do
    DEST="$destination"/$(basename $f)
    mkdir -p "$DEST"
    "$command" < "$f" > "$DEST/out" 2> "$DEST/err"
    echo $? > "$DEST/status"
done

这同样可以用each写成如下

each "$source" "$command" --destination="$destination"

除了更短、更易读外，使用each编写此代码还能得到

1. 自动并行化。您可以使用--processes=n来控制运行多少个进程，但默认情况下将使用除了一个之外的所有可用核心（或在单核机器上的一个核心）。

2. 自动恢复 - 如果each崩溃，当它下次启动时，它将从上次停止的地方恢复。

3. 进度反馈，以及关于进程何时完成的良好预测分析（仍在进行中，但基本功能已经实现）。

稍后您还将获得良好的错误重试逻辑，但我还没有编写这部分。

each还处于早期阶段，因此可能有一些粗糙的边缘，但它经过良好测试，并且已经使我的生活大大改善。

each some-input-directory 'some command to run' --destination="output directory"

pip install each