Искать в больших файлах специальные символы

Один из выполняемых нами шагов проверки данных связан со «специальными символами» в выходных файлах. Это текстовые файлы, разделенные вертикальной чертой. Сегодня мы открываем файл в UltraEdit, а затем нажимаем Ctrl + F. Эти выходные файлы различаются по размеру, самый большой из которых превышает 54 ГБ. Ищете более эффективный (также известный как автоматизированный) подход к этому этапу. Какие-либо предложения?

Запустите UltraEdit с параметрами командной строки /fni и /M или /S с макросом или сценарием, созданным вами для запуска замены файлов в большом файле, не открывая его в UltraEdit вообще для максимальной производительности (без подсчета строк, без отмены записи, без подсветка, отсутствие обновлений окон и т. д.).

— 17.11.2018 22:45

search text automation automated-tests flat-file

24.10.2018 17:02

Стоит ли изучать PHP в 2026-2027 годах?

Привет всем, сегодня я хочу высказать свои соображения по поводу вопроса, который я уже много раз получал в своем сообществе: "Стоит ли изучать PHP в...

Поведение ключевого слова "this" в стрелочной функции в сравнении с нормальной функцией

В JavaScript одним из самых запутанных понятий является поведение ключевого слова "this" в стрелочной и обычной функциях.

Приемы CSS-макетирования - floats и Flexbox

Здравствуйте, друзья-студенты! Готовы совершенствовать свои навыки веб-дизайна? Сегодня в нашем путешествии мы рассмотрим приемы CSS-верстки - в...

Тестирование функциональных ngrx-эффектов в Angular 16 с помощью Jest

В системе управления состояниями ngrx, совместимой с Angular 16, появились функциональные эффекты. Это здорово и делает код определенно легче для...

Концепция локализации и ее применение в приложениях React ⚡️

Локализация - это процесс адаптации приложения к различным языкам и культурным требованиям. Это позволяет пользователям получить опыт, соответствующий...

Пользовательский скаляр GraphQL

Листовые узлы системы типов GraphQL называются скалярами. Достигнув скалярного типа, невозможно спуститься дальше по иерархии типов. Скалярный тип...

127

Перейти к ответу Данный вопрос помечен как решенный

Ответы 1

Ответ принят как подходящий

используя Java для файла 15gb потребовалось 30сек.

long found = Files.lines(Paths.get("dummy.txt"))
                 .filter(s -> s.contains("test"))
                 .count();
System.out.println(count);

24.10.2018 18:19

Другие вопросы по теме

Приложение или способ разбить столбец данных на именованные текстовые файлы?

Python: заполнение списка объектов из файла .txt

Как аннотировать разные значения для каждого аспекта с помощью уклоненного geom_boxplot на R?

Как преобразовать сгенерированный текстовый файл в формат Junit (XML) с помощью Perl

Импортируйте текстовый файл в Excel, разделите строку, где пробелы, и поместите каждое слово в ячейку

HTML / CSS изменить размер текста, встроенного в размер содержимого

Python-Sqlite3: попытка экспорта строк. Проблема: содержат "\ N \ n"

R: ggplot2 пусть символы geom_text точно покрывают одну единицу X

Как выровнять текст по левому и правому краю в опции множественного выбора в Bootswatch

React-Native: центрируйте два текстовых компонента в одном компоненте View

Искать в больших файлах специальные символы

Ответы 1

Другие вопросы по теме

Похожие вопросы