awk и вырезать на очень большой файл

383
bryan

Я должен извлечь столбец данных из очень большого файла> 100 ГБ.

Я знаю, как использовать команды awkand cut, но хотел бы знать, является ли кто-то более эффективным (с точки зрения скорости) для такой задачи.

0
Grep должен быть самым быстрым способом поиска строки в файле: `grep -o" \ w * pattern \ w * "/ path / to / file`. Возможно, вы захотите прочитать также о `параллельном 'для использования нескольких` grep` в чанках этого файла. Alex 7 лет назад 0
Если можно использовать `cut`, он должен быть быстрее, поскольку он намного проще и, следовательно, менее эффективен. Michael Vehrs 7 лет назад 0

0 ответов на вопрос

Похожие вопросы