Используя jq для извлечения значений и формата в CSV

jq имеет фильтр @csv для преобразования массива в строку CSV. Этот фильтр учитывает большинство сложностей, связанных с форматом CSV, начиная с запятых, встроенных в поля. (jq 1.5 имеет аналогичный фильтр, @tsv, для создания файлов значений, разделенных табуляцией.)

Конечно, если все заголовки и значения гарантированно свободны от запятых и двойных кавычек, тогда может не быть необходимо использовать фильтр @csv. В противном случае, наверное, лучше было бы его использовать.

Например, если «Название компании» было «Смит, Смит и Смит», и если другие значения были такими, как показано ниже, вызов jq с параметром «-r» приведет к созданию действительного CSV:

$ jq -r '.data | map(.displayName), map(.value) | @csv' so.json2csv.json
"First Name","Last Name","Position","Company Name","Country"
"John (""Johnnie"")","Doe","Director, Planning and Posterity","Smith, Smith and Smith","Transylvania"

При каждом изменении конфигурации добавьте суффикс, кратко описывающий конфигурацию, в поле EXTRAVERSION файла Makefile.

EXTRAVERSION=-lpae

и другое время

EXTRAVERSION=-486

Что пути различные конфигурации являются различными версиями, поскольку задействованы все инструменты: разные выходные данные из uname -r , различные подкаталоги в /lib/modules и т. д.

Именно это делают большинство дистрибутивов.

Ответ дан в комментарии перечислять рассылки Штефана Дёсингера под названием Wine 64 bit

OSX имеет ABI несовместимость с Win64 - OSX перезаписывает регистр CPU, который Win64 приложения ожидают, что останется нетронутым. Apple не может изменить ABI, так как уже существуют 64-разрядные приложения OSX, которые ожидают, что все будет работать путь. Потенциальным обходным путем может быть запуск Wine внутри эмулятора CPU, как qemu, но это все, кроме просто.

Я предпочитаю делать каждую запись строкой в моем CSV.

jq '.data | map([.displayName, .rank, .value] | join(", ")) | join("\n")'

Мне нравится jq , но это не инструмент для преобразования JSON в CSV. Чтобы сделать что-нибудь с CSV, рассмотрите:

• csvkit:достойный универсальный -инструментарий CSV, имеет in2csv , который может преобразовывать JSON в CSV
• GoCSV:похож на csvkit, но я бы сказал «более округлый -»; имеет транспонирование , что и требуется для этой задачи

Эта запятая после последнего объекта («Страна» )в массиве создает проблемы для jq , поэтому я удалил ее вручную.

Вот полный конвейер для получения желаемого результата,

% jq '.data' < so.json        # Get just the array of objects
| in2csv -f json -I           # Convert array-of-objects to rows-with-fields
| gocsv transpose             # "Rotate" table
| gocsv tail -n 1             # Cut out rank
| gocsv select -c 1 -exclude  # Cut out JSON property names

и вы получите,

First Name,Last Name,Position,Company Name,Country
VALUE,VALUE,VALUE,VALUE,VALUE

После команды jq , которая просто приводит нас к данным, вот вывод на каждом этапе:

in2csv -f json -I:

Каждый объект становится строкой, и каждое свойство объекта является его собственным полем; -Iчтобы не выводить типы данных (оставьте любое значение, поскольку -равно ).

displayName,rank,value
First Name,1,VALUE
Last Name,2,VALUE
Position,3,VALUE
Company Name,4,VALUE
Country,5,VALUE

gocsv transpose:

Первый столбец становится заголовком, а каждый последующий столбец становится строкой.

displayName,First Name,Last Name,Position,Company Name,Country
rank,1,2,3,4,5
value,VALUE,VALUE,VALUE,VALUE,VALUE

gocsv tail -n 1:

Начиная с нижнего ряда, сохранить "1 ряд вверх" (только этот нижний ряд ); эффективно вырезал ранг .

displayName,First Name,Last Name,Position,Company Name,Country
value,VALUE,VALUE,VALUE,VALUE,VALUE

gocsv select -c 1 -exclude:

Наконец, исключите первый столбец; эффективное вырезание имен свойств объекта из исходного JSON.

First Name,Last Name,Position,Company Name,Country
VALUE,VALUE,VALUE,VALUE,VALUE

Старый вопрос, но кажется, что все ответы рекомендуют индексировать по displayName, что для меня не имеет смысла. CSV — это не индексированный формат, это список строк, поэтому нелогично, что вам нужно что-то индексировать. Единственным исключением является https://unix.stackexchange.com/a/673753/488462, который я бы предпочел на практике, за исключением того, что он использует csvkit, а вопрос явно касается jq.

Так вот jq -единственный путь в два шага:

• Построить заголовок:cat data.json | jq '.[0] | keys_unsorted | @csv' > data.csv
• Преобразование значений:cat data.json | jq '.[] | map(values) | @csv' >> data.csv

Вы можете объединить их в одну команду с помощью teeили создать сложный jq-запрос, который делает обе вещи, если хотите, но я думаю, что эта версия уже достаточно хороша.

Обратите внимание, что вы должны использовать keys_unsorted, потому что keysбудет сортировать ваши ключи (, а valuesне ), что приведет к несоответствию столбцов. Кроме того, хотя обычно людям нужны оба шага, технически формат CSV не требует заголовка -, это просто необязательное удобство (и не всегда желательно ). Таким образом, в этих случаях вы можете опустить заголовок.

Наконец, входные данные вашего примера без необходимости заключены в объект с именем data. Я предполагаю, что вы распаковываете это с помощью тривиальной команды, такой как cat input.json | jq '.data' > data.json, так как это не имеет отношения к тому, что запрашивается (для преобразования в CSV ).