文字列の生文字を使用したJSON変換

違法なJSONを生成するツールに問題があります。

一部のJSON文字列には00から1fの範囲の文字が含まれています。したがって、これらの文字を\u00xx文字列から適切にエスケープされた値に変換したいと思います。

私ができる最善は：

cat test2.json | jq -aR . | sed -e 's/\\"/"/g' -e 's/^"\(.*\)"$/\1/' | jq

説明する：

jq -aR                    reads the data as raw input and converts
                          the whole thing into a single string.
                          This converts all control characters into
                          the correct form => \u00xx

sed -e 's/^"\(.*\)"$/\1/' Removes the quotes from the beginning and end.

sed -e 's/\\"/"/g'        Looks for escaped quotes and removed the quotes.

jq                        Just makes it pretty again at the end.
                          Also makes sure it is valid JSON.

いくつかの問題が見つかりました（幸いなことに私には影響を及ぼす問題はありません）。

1. 文字列に含まれる '\n' が正しく処理されませんでした。
2. これで、すべてのエスケープ文字をダブルエスケープできます。
3. 私が考慮していない他のものがあるかもしれません。

一部のテストデータは、次のように生成できます。

echo -e "{ \"data\": \"XX\001YY\"}" > test2.json

それからテストしました。

cat test2.json | jq -aR . | sed -e 's/\\"/"/g' -e 's/^"\(.*\)"$/\1/' | jq

生成する:

{
  "data": "XX\u0001YY"
}

newline文字列の内部にあるとき => '\n' => '\x0a' が正しく処理されないことに気づきました。