Любой язык - Удаление из txt файлов не нужных строк и дубликатов строк.

Внимание, важное сообщение: Дорогие Друзья!
В ноябре далекого 2001 года мы решили создать сайт и форум, которые смогут помочь как начинающим, так и продвинутым пользователям разобраться в операционных системах. В 2004-2006г наш проект был одним из самых крупных ИТ ресурсов в рунете, на пике нас посещало более 300 000 человек в день! Наша документация по службам Windows и автоматической установке помогла огромному количеству пользователей и сисадминов. Мы с уверенностью можем сказать, что внесли большой вклад в развитие ИТ сообщества рунета.

Но... время меняются, приоритеты тоже. И, к сожалению, пришло время сказать До встречи! После долгих дискуссий было принято решение закрыть наш проект. 1 августа форум переводится в режим Только чтение, а в начале сентября мы переведем рубильник в положение Выключен

Огромное спасибо за эти 24 года, это было незабываемое приключение. Сказать спасибо и поделиться своей историей можно в данной теме.

С уважением, ваш призрачный админ, BigMac...

Любой язык - Удаление из txt файлов не нужных строк и дубликатов строк.

voler

Ветеран

Сообщения: 907
Благодарности: 36

Профиль | Отправить PM | Цитировать

Изменения

Автор: voler
Дата: 24-02-2018

Подскажите как лучше решить задачу есть:
1. директория содержащая в себе много txt файлов.
2. в которых нужно удалить строки содержащие Слова UserName, Login, Logout
3. есть дубликаты строк, temp, bpdu, а может и целое предложение быть как условие.
4. исключить часть директорий.
5. исключить большие файлы.
6. удалить мусор после прогона появляются файлы 0 размера.

Второй пункт можно решить sed, но нужно выполнять поиск в более чем 1000 файлов. Как это сделать оптимально?

Код:

Echo on&Chcp 866

set $DSF=C:\_web\home\www\sw-logs
rem папка с твоими файлами

for /f %%a in ('Dir /b /s %$DSF% ^| Find /i ".txt"') do C:\_web\sed.exe  -i "/Username/d" %%~dpa%%~nxa

pause& goto :eof

-------
Linux, это плацдарм для изучения своих возможностей.

Отправлено: 13:56, 24-02-2018