Ошибка максимальной длины полей CSV и установка quoting=csv.QUOTE _NONE
Диски WD Green предназначены для относительно быстрой парковки головок после простоя диска. В результате вы получите большое количество загрузок.
Старая статья, но все же довольно точная,https://www.pugetsystems.com/labs/articles/Western-Digital-Green-vs-Red-Hard-Drives-602/пишет
A load/unload cycle is when the disk spins up its platter to get ready for operation. Typically this happens when you turn on a system, resume from standby, or when the drive has been idle long enough for the OS to power down the drive. [..] the 300,000 cycles the Green drives are rated for is really quite a lot already. Even if you turn on/off your system or let it idle long enough to power down the drive 20 times a day, 365 days a year, a Green drive should still last for over 40 years.
Также
Head parking delay 8 seconds
В вашем случае два диска были включены в течение 31743 часов и 11176 часов соответственно (приблизительно 3 года 6 месяцев и 1 год 3 месяца в режиме 24x7 ). Для такого периода времени количество циклов загрузки/выгрузки действительно не является необоснованным.
Если вы работаете в режиме 24x7, учтите, что вам следует использовать WD Red вместо Green.
В документации к csvkitуказано, что аргумент -zможет использоваться для настройки FIELD_SIZE_LIMIT.
Так что я предлагаю попробовать с довольно большим числом:
csvcut -z 2500000 -c title,mpn,overview,techspecs2,image_carousel_elargesrc syn_multi-image.csv > syn_scraped_cut.csv