Вкладка с разделителями-запятыми в UNIX - один вкладыш?

Question

Вкладка с разделителями-запятыми в UNIX - один вкладыш?

0

У меня есть файл с разделителями табуляции (файл MySQL Out).

Я хочу преобразовать его в файл CSV. У меня все работает, за исключением замены NULL на ничего или пробелы.

У меня есть: sed -e 's/^/"/; s/$/"/; s/\t/","/g;' < file.csv > file1.csv

Как заменить NULL в одной строке.

Не работает следующее.

sed -e 's/NULL//; s/^/"/; s/$/"/; s/\t/","/g;' < file.csv > file1.csv

Приветствуется любой ввод.

Спасибо!

user337672 11 май 2010, в 00:37

Источник

3

Я чувствую себя обязанным отметить, что почти никогда не бывает хорошей идеей попытаться сделать это. Люди всегда думают: «О, это файл [CT] SV, его тривиально разобрать», и это редко случается. Буквальные вкладки будут в кавычках, но вы все равно конвертируете их в запятые. Кроме того, существующие запятые в файле не заключаются в кавычки, поэтому у вас будет больше полей, чем нужно
Michael Mrozek 10 май 2010, в 21:48
0

Не могли бы вы рассказать, как он не может удалить NULL? Может быть, дать пару до и после? Дело не просто в пропущенном «г», не так ли?
Beta 10 май 2010, в 21:55
0

@ Бета: Я думаю, что ты прав. Вы должны опубликовать ответ, показывающий "g": s/NULL//g
Dennis Williamson 10 май 2010, в 22:20
0

@ Майкл: Пожалуйста, уточните. Будут ли проблемы с этим подходом? Это единственное решение, которое у нас есть, пока MySQL не реализует select в outfile - выводит файл out на сервер, отличный от файла базы данных. @ Бета, Деннис: это недостающее «г». Я полностью пропустил это. Большое спасибо, ребята.
user337672 11 май 2010, в 13:06
0

@eff Один из возможных вариантов - если на входе уже есть вкладка в кавычках. Например, если одна из строк в вашем TSV (притворные пробелы - табуляция) "one two" three , выходные данные должны быть one two,three , но это не будет
Michael Mrozek 11 май 2010, в 15:07
0

@ Майкл: Да, теперь я понял. Каков будет ваш подход в этом случае? Спасибо!
user337672 11 май 2010, в 16:09

Показать ещё 4 комментария

Теги:

mysql

regex

unix

replace

sed

2 ответа

Ещё вопросы

Я чувствую себя обязанным отметить, что почти никогда не бывает хорошей идеей попытаться сделать это. Люди всегда думают: «О, это файл [CT] SV, его тривиально разобрать», и это редко случается. Буквальные вкладки будут в кавычках, но вы все равно конвертируете их в запятые. Кроме того, существующие запятые в файле не заключаются в кавычки, поэтому у вас будет больше полей, чем нужно
Не могли бы вы рассказать, как он не может удалить NULL? Может быть, дать пару до и после? Дело не просто в пропущенном «г», не так ли?
@ Бета: Я думаю, что ты прав. Вы должны опубликовать ответ, показывающий "g": s/NULL//g
@ Майкл: Пожалуйста, уточните. Будут ли проблемы с этим подходом? Это единственное решение, которое у нас есть, пока MySQL не реализует select в outfile - выводит файл out на сервер, отличный от файла базы данных. @ Бета, Деннис: это недостающее «г». Я полностью пропустил это. Большое спасибо, ребята.
@eff Один из возможных вариантов - если на входе уже есть вкладка в кавычках. Например, если одна из строк в вашем TSV (притворные пробелы - табуляция) "one two" three , выходные данные должны быть one two,three , но это не будет
@ Майкл: Да, теперь я понял. Каков будет ваш подход в этом случае? Спасибо!

user unknown · Answer 1 · 2012-05-02T20-46-00.000Z

Разве вы не забыли поставить там 'g'-модификатор?

sed -e 's/NULL//g; s/^/"/; s/$/"/; s/\t/","/g;' < file.csv > file1.csv

Samus_ · Answer 2 · 2011-05-01T03-07-00.000Z

вы не можете сделать это с помощью sed.

#!/usr/bin/env python

import sys, csv

reader = csv.reader(open(sys.argv[1], 'rb'), delimiter="\t", escapechar="\\")
writer = csv.writer(open('output.csv', 'wb'))
for row in reader:
    writer.writerow(row)