jq経由で何千もの巨大なjsonファイルをリンクする

Question

jq -c -s add file*

その後、file*パターンに一致するすべてのファイルをに読み込みますjq。-s（）オプションを使用する--slurpと、すべての入力ファイルで単一の配列が生成されます。この大きな配列の各要素は、ファイルの1つのオブジェクトです。配列要素を一緒に結合してaddオブジェクトを形成します。

この-cオプションはjq「コンパクト」出力を生成します。

ファイルが多すぎると、コマンドラインの最大許容長を超えるため、シェルはコマンドを実行できません。

この場合、コマンドが処理するfindJSONオブジェクトストリームを生成できます。jq

find . -name '*.json' -type f -exec cat {} + | jq -c -s add >final

fromを使用して、cat入力ファイル（find名前が現在のディレクトリまたは現在のディレクトリで終わる一般的なファイル）からJSONオブジェクトストリームを作成します。.jsonこのjqコマンドはそれを配列として収集し、以前のようにオブジェクトに結合します。最終結果はファイルに出力されますfinal。

キー（複数のファイル内の同じキー）の間に競合がある場合、最後に見つかったキーとその値は以前のキーとその値を上書きします。

Answer 1

jq -c -s add file*