CMD/BAT

Foreigner · Отправлено: **23:13, 10-02-2023** | #2

А где кусочек файла?

Примерно так. Но не точно:

Код:

"Thats a nice, joke ������ ��? Yes!" -replace '(?<=\s|^)\W+?(?=\s|$)'

PS. Смайлики исчезли.

Asdshka · Отправлено: **11:49, 11-02-2023** | #3

Цитата Foreigner:

А где кусочек файла? »

Ну примерно такие строки в файле: "1.txt"

Цитата:

5�ἱﺖخGρ慭εο�γλﮢل▒ύO�οςφ慭óO¶Ã��D��4

Нужно, чтобы кроме кириллицы, латиницы, арабских цифр и спецсимволов обычных ничего не осталось:

Цитата:

ёйцукенгшщзхъфывапролджэячсмитьбю
ЙЦУКЕНГШЩЗХЪФЫВАПРОЛДЖЭЯЧСМИТЬБЮ
qwertyuiopasdfghjjklzxcvbnm
QWERTYUIOPASDFGHJKLZXCVBNMM
1234567890
!@#$%^&*()_+-=/;:'"\|,./<>?`~[]{}

Foreigner · Отправлено: **13:32, 11-02-2023** | #4

Цитата Asdshka:

Нужно, чтобы кроме кириллицы, латиницы, арабских цифр и спецсимволов обычных ничего не осталось »

Попробуйте, правда не уверен на счет производительности. Но в принципе это возможно оптимизировать

Powershell:

Код:

$str = [char[]](Get-Content 1.txt | Out-String)
$chars = [char[]]("ёйцукенгшщзхъфывапролджэячсмитьб" + `
                  "юЙЦУКЕНГШЩЗХЪФЫВАПРОЛДЖЭЯЧСМИТЬБ" + `
                  "ЮqwertyuiopasdfghjjklzxcvbnmQWER" + `
                  "TYUIOPASDFGHJKLZXCVBNMM123456789" + `
                  "0!@#$%^&*()_+-=/;:'`"``\|,./<>?~[]{}`n`r`t ")
     
-join ($str | ? { $_ -in $chars }) | Set-Content 2.txt

YuS_2 · Отправлено: **14:13, 11-02-2023** | #5

Цитата Asdshka:

ёйцукенгшщзхъфывапролджэячсмитьбю
ЙЦУКЕНГШЩЗХЪФЫВАПРОЛДЖЭЯЧСМИТЬБЮ
qwertyuiopasdfghjjklzxcvbnm
QWERTYUIOPASDFGHJKLZXCVBNMM
1234567890
!@#$%^&*()_+-=/;:'"\|,./<>?`~[]{} »

Код:

$file = '.\1.txt'
$out = 'out.txt'
(gc $file -enc utf8) -replace '[^-a-zа-яё\d!@#$%^&*()_+=/;:"\\|,./<>?`~\[\]{}\x27 ]'|out-file $out -enc utf8

DJ Mogarych · Конфигурация компьютера

Код:

$from = "C:\temp\test.txt"
$to = "C:\temp\result.txt"

$chars = [char[]](33..126+1040..1103+1025+1105)
$result = foreach ($str in (gc $from)) {
    -join (($str).ToCharArray() |% {if ($_ -in $chars) {$_}})
}
$result |Out-File $to -Encoding utf8

Можно сделать отбор символов поизящнее, например, по категориям: https://lazywinadmin.com/2015/08/pow...haracters.html

Foreigner · Отправлено: **14:48, 11-02-2023** | #7

С replace в 28 раз быстрее. на 10K строк (из примера) 1 сек против 28.

Asdshka · Отправлено: **20:24, 11-02-2023** | #8

А если мне нужно удалить ещё и просто спецсимволы, но после первого знака ":" или ";"
То есть строки могут быть
ads/ghvj:adg23@14hjbkn
ads/ghvj;adg23@14hjbkn

Asdshka · Отправлено: **22:00, 11-02-2023** | #9

Цитата Foreigner:

-replace '(?<=[^:;]+)[^-a-zа-яё\d!@#$%^&*()_+=/;:"\\|,./<>?`~\[\]{}\x27 ]' »

Немного не то, надо удалить спецсимволы после разделителя, а разделитель либо ":" либо ";", могут оба присутствовать

Foreigner · Отправлено: **22:19, 11-02-2023** | #10

Asdshka, Я ошибся и удалил сообщение. Тут придется не весь текст "махом" обрабатывать, а построчно, что дольше, как-то так (не тестировал):

Код:

$content =
foreach ($line in (Get-Content file.txt))
{
    $a, $b = $line -split '(?<=[^:;]+[:;])(?=.+)'
    -join ($a, $($b -replace '[^-a-zа-яё\d!@#$%^&*()_+=/;:"\\|,./<>?`~\[\]{}\x27 ]'))
}

Set-Content out.txt $content