Название: Penguin-Setup Описание : Penguin – это бесплатная программа, служащая для обработки текстовых файлов больших размеров (до терабайта). Под обработкой подразумевается возможность осуществления выборок по ряду условий, фильтрация этих выборок от любого мусора, сортировка, перемешивание, удаление явных и неявных дублей строк, поиск дубликатов строк, осуществление поиска, замены и т.п.Какие задачи может решать Penguin:Открывать и просматривать контент больших текстовых файлов (1-2000Gb).Производить выборки по ряду условий из текстовых файлов любых размеров со скоростью порядка 1 гигабайта в минуту.Производить фильтрацию строк или кейвордов по включениям. Т.е. задав в качестве включения слово "Скачать" Вы получите все строки, которые содержат данное слово. Возможно задавать несколько включений одновременно, можно использовать регулярные выражения.Производить фильтрацию строк или кейвордов по исключениям. Т.е. задав в качестве включения слово "Бесплатно" Вы получите все строки, которые не содержат данное слово. Возможно задавать несколько включений одновременно, можно использовать регулярные выражения.Производить фильтрацию фильтрации строк или кейвордов по дублям слов (в расширенной версии).Фильтровать строки по длине.Фильтровать строки по количество слов.Удалять явные дубли.Удалять неявные дубли (в расширенной версии).Находить дубли. Актуально, если нужно найти пересечения в нескольких списках любых строк или кейвордов (в расширенной версии).Производить поиск нужных элементов каждой строки с помощью регулярных выражений. Например можно с легкостью из списка с данными клиентов извлечь список телефонов, задав 1 условие.Производить поиск-замену, как с регулярными выражениями, так и без, в текстовых файлах неограниченных размеров.Производить обработку одновременно нескольких файлов.Производить выборку по разным включениям, сохраняя результаты в разные файлы, получая отдельные выборки по каждому условию за 1 проход (в расширенной версии).Сохранять все настройки для повторного выполнения однотипных обработок. Добавлено : 22 ноя 2015
