[DJ Mogarych]

Powershell

Код:

gc 'C:\temp\big.log' |% {
    if ($_ -match 'service1') {$_ >> 'C:\temp\service1.log'}
    if ($_ -match 'service2') {$_ >> 'C:\temp\service2.log'}
}

[Sham]

Код:

gc 'file.log' | ? { $_ -match '\d{8} \d{2}:\d{2} (service1|service2)' } | % { $_ >> "c:\logs\$($Matches[1]).log" }

[megaloman]

cmd

Код:

	@Set "FileIn=Z:\Box_In\Есть текстовый файл.txt"

	>"Z:\Box_In\service1.txt" FindStr /I " service1 " "%FileIn%" 
	>"Z:\Box_In\service2.txt" FindStr /I " service2 " "%FileIn%"

[xam2002]

Большое спасибо!

Все варианты рабочие, но при тестовом прогоне (1,9млн строк, 300mb) выяснилось, что ps работает в разы дольше скрипта на cmd (ps - 690 секунд, cmd - 2) и сохраняет файл по умолчанию в UTF-16.

ЗЫ Если не сложно, подскажите как кодировку по дефолту в PS оставлять?

[Sham]

как кодировку по дефолту в PS оставлять? »

сверху добавьте строку

Код:

$PSDefaultParameterValues['Out-File:Encoding'] = 'default'

Кодировка в зависимости от исходной (utf8, oem и т.д.). В core версии набор кодировок немного отличается.

ps работает в разы дольше скрипта на cmd »

конечно же FindStr быстрее, но и ps можно оптимизировать под конкретную задачу.

[xam2002]

Sham,
Большое спасибо, забыл, что можно использовать глобальные переменные, пытался с параметром в самом out-file играть.

конечно же FindStr быстрее, но и ps можно оптимизировать под конкретную задачу. »

А можно поподробнее, где почитать? Все-таки ps намного гибче, и возможно в будущем пригодится.

[Uragan66]

Можно и мой экзотический вариант попробовать:

Код:

ForEach ($str in (Get-Content .\service.txt  -Encoding utf8)) {
($str | Select-String -Pattern '[\S\s]*service1[\S\s]*').Matches | ForEach {$_.Value | Out-File -Append .\service1.log -Encoding utf8}
($str | Select-String -Pattern '[\S\s]*service2[\S\s]*').Matches | ForEach {$_.Value | Out-File -Append .\service2.log -Encoding utf8}
}

Насколько будет быстро работать, не знаю, нет такого большого файла на проверить...

[Foreigner]

Гораздо быстрее будет когда Select-String читает файл, а не получает его содержимое через пайп.

Код:

Select-String 'service1' file.log -raw | Out-File service1.log
Select-String 'service2' file.log -raw | Out-File service2.log

[DJ Mogarych]

Так вроде побыстрее должно быть:

Код:

function ExtractTo-Chunk ($in,$out,$regex) {
    [regex]$regex = $regex
    [System.IO.File]::AppendAllText("$out", ([System.IO.File]::ReadAllLines("$in") -match $regex -join [Environment]::NewLine))
}

ExtractTo-Chunk -in "C:\temp\big.log" -out "C:\temp\service1.log" -regex "service1"
ExtractTo-Chunk -in "C:\temp\big.log" -out "C:\temp\service2.log" -regex "service2"

Ref: https://stackoverflow.com/questions/...arge-text-file