Regexp в нескольких файлах

[legushonok]

Добрый день.
Собственно есть куча файлов в которых нужно заменить код:

Код:

if (!session_is_registered("auth")) { exit; }

на

Код:

if(!isset($_SESSION["auth"])) exit;

С регой знаком не очень хорошо и сложно представляю как заменять сложные выражения.
Просьба помочь.

[SLEDopit]

Я бы сделал sed'ом примерно так:

Код: Выделить всё

for file in *mask ; do
sed -i.bak '/if.*session_is_registered/{N;N;N;s/if (!session_is_registered("auth"))\s*\n\s*{\s*\n\s*exit;\s*\n\s*}/if(!isset($_SESSION["auth"])) exit;/;}' $file ;
done

-i.bak сохранит оригинал, прибавив к его имени .bak.
на всякий случай я бы рекомендовал делать именно так, чтобы, если вдруг что-о пойдёт не так, можно было откатить изменения. если же всё хорошо, то можно будет просто удалить лишние файлы.

[legushonok]

Спасибо большое за помощь.
Бэкаплюсь обычно по несколько раз перед ломанием.

[sciko]

Вопрос про многострочную замену в sed довольно распространён, но, увы, SLEDopit ответил на него неверно.

sciko

$ cat test.txt if (!session_is_registered("none")) exit; if (!session_is_registered("auth")) { exit; } $ sed -e '/if.*session_is_registered/{N;N;N;s/if (!session_is_registered("auth"))\s*\n\s*{\s*\n\s*exit;\s*\n\s*}/if(!isset($_SESSION["auth"])) exit;/;}' test.txt if (!session_is_registered("none")) exit; if (!session_is_registered("auth")) { exit; } $ WTF?

В чём же причина? А причина одна -- безблагодатность неверный алгоритм.

Как работает вышеописанный скрипт для sed? Сперва ищется строка совпадающая с регэкспом "if.*session_is_registered". Если она найдена, то выполняется блок команд (те, что между фигурными скобками).
Сам блок команд же очень прост: в рабочий буфер sed считывается ещё 3 строки ("N;N;N;"), после чего происходит попытка замены через операцию s///.

Однако проблема в том, что, если регэксп "if.*session_is_registered" совпадает с некой строкой, то ещё 3 строки считываются в любом случае, даже если там не произошло замены. Если же на эти 3 строки попадётся нужный для замены участок, то он будет пропущен.

Так какой же вариант правильный? Увы и ах, он очень сложен. Поэтому я приведу просто работоспособный:

Код: Выделить всё

for file in *mask ; do sed -i.bak ':a;N;s/if (!session_is_registered("auth"))\s*\n\s*{\s*\n\s*exit;\s*\n\s*}/if(!isset($_SESSION["auth"])) exit;/g;ta' $file ; done

Как это работает?
Создаётся метка "a" (команда ":a;"). Далее считывается очередная строка (команда ":N;") и производится попытка замены. Если попытка замены -- неудачная, то происходит переход на метку "a" (команда "ta;").

Почему этот скрипт -- неверный? Потому что, если в файле менять нечего, то в рабочий буфер sed будет считан весь файл, что не есть хорошо.

[liaonau]

Почему этот скрипт -- неверный? Потому что, если в файле менять нечего, то в рабочий буфер sed будет считан весь файл, что не есть хорошо.

В данном случае из самого текста для замены ясно, что файл это исходник или скрипт — в-общем такой, который, вероятно, редактируется вручную в
текстовом редакторе (явно не несколько гигабайт размером). Редактор же считывает его в буфер полностью и ничего страшного.

[drBatty]

Почему этот скрипт -- неверный? Потому что, если в файле менять нечего, то в рабочий буфер sed будет считан весь файл, что не есть хорошо.

вы можете

1. считать 4 строки N;N;N;N

2. поискать нужное

3. если не нашли, считать ещё строку N, и удалить одну старую D, и затем goto 2

таким образом, в буфере sed будет всегда 4 строки.

В данном случае из самого текста для замены ясно, что файл это исходник или скрипт — в-общем такой, который, вероятно, редактируется вручную в
текстовом редакторе

вы первый пост читали? Как вы собрались over9000 файлов СРАЗУ редактировать? Такое разве что в vim'е можно (только я никогда так не делаю, ибо есть sed)

[liaonau]

Как вы собрались over9000 файлов СРАЗУ редактировать?

Это не было предложением редактировать вручную. Это было предположением, что нет ничего страшного в том, чтобы прочитать в буфер sed весь файл целиком.

[drBatty]

Это было предположением, что нет ничего страшного в том, чтобы прочитать в буфер sed весь файл целиком.

зачем так делать, если можно сделать намного лучше?

[sciko]

1. считать 4 строки N;N;N;N

Достаточно 3 N;, т.к. одна строка всегда считывается при начале sed-сценария.

3. если не нашли, считать ещё строку N, и удалить одну старую D, и затем goto 2

Идея правильная, но D просто удаляет строку из буфера, а надо её ещё и вывести. Кроме того, D автоматом бросает на начало sed-сценария.

[drBatty]

Достаточно 3 N;, т.к. одна строка всегда считывается при начале sed-сценария.

я по опыту знаю, что код проще, если в буфере n+1 строка. Но да, в теории можно и n строк, но тогда код получается более сложный.

Идея правильная, но D просто удаляет строку из буфера, а надо её ещё и вывести.

про команду P вы не слышали? А для кого я учебник-то писал?! Вот вам пример: http://emulek.github.io/sed/ch07.html#info_uniq

Кроме того, D автоматом бросает на начало sed-сценария.

а мужики-то не знали...

[sciko]

Но да, в теории можно и n строк, но тогда код получается более сложный.

С чего бы это?

про команду P вы не слышали?

а мужики-то не знали...

А если знаете, то зачем даёте заведомо неверный алгоритм?

[drBatty]

Но да, в теории можно и n строк, но тогда код получается более сложный.

С чего бы это?

попробуйте, и поймёте. Может я и ошибаюсь, не каждый день это надо.

А если знаете, то зачем даёте заведомо неверный алгоритм?

а вы по ссылке сходите. Алгоритм верный, там D используется. А для печати -- вот как раз P. Может я виноват ещё и в том, что весь код не написал для вас? Похоже ТСу он и не нужен, он свою задачу решил уже. А ежели кто забредёт сюда потом, то у него будет немного другая задача, и мой готовый код ему не пойдёт. Зачем же я его писать должен?

[sciko]

Алгоритм верный, там D используется.

Так все говорят.

1. считать 4 строки N;N;N;N

2. поискать нужное

3. если не нашли, считать ещё строку N, и удалить одну старую D, и затем goto 2

Давайте разбирать по шагам:

1) Считали 4 строки. Теперь их в буфере 5 (с 1 по 5).

2) Поискали, не нашли

3) Считываем ещё одну строку (теперь с 1 по 6), выводим первую (P) и удаляем её через D (теперь с 2 по 6)

4) goto 2 А вот и хрен! D перебрасывает нас на 1.

5) Считываем ещё 5 строк (с 2 по 11)

.......

И так будет набираться, пока не будет обнаружено совпадение, как и в более коротком варианте выше.
А если в файле не будет вообще ни одного совпадения, то на выходе получим только первые 1/5 файла, выведенные командой P, остальные останутся в буфере.

Может я виноват ещё и в том, что весь код не написал для вас?

Мне не надо, я знаю правильный вариант.

А ежели кто забредёт сюда потом, то у него будет немного другая задача, и мой готовый код ему не пойдёт.

Поэтому я и расписал подробно как работает мой код.
А ваш алгоритм не подойдёт по другой причине: в нём ошибки, его нельзя повторно использовать. Именно поэтому я и написал пост-предупреждение о вашем алгоритме для других.

Не хотите исправлять? И не надо! Но хотя бы не отрицайте, что алгоритм указывает только на направление решения, а не является решением.

[drBatty]

А вот и хрен! D перебрасывает нас на 1.

ну что вы как дети малые? Такое ощущение, что вы компьютер впервые увидели... Ну понятно, что надо начать с п2

Код: Выделить всё

# 2. если строка №1 идём на :begin
1b begin
# 2.1...

# 3... D перебрасывает нас в начало

# ...
b # конец

:begin
#тут начало.

А ваш алгоритм не подойдёт по другой причине: в нём ошибки, его нельзя повторно использовать.

у меня именно что _алгоритм_, а не реализация. Ссылка на учебник в подписи есть. Это если непонятно, как реализовывать. ЕМНИП там этот момент с D подробно обсасывается. Я что, должен в каждой теме одно и то же писать? Зачем? Если у меня в учебнике этот момент недостаточно полно рассмотрен -- так и пишите: вот, у тебя всё плохо. Я исправлю. А переписывать-то зачем?

Не хотите исправлять? И не надо! Но хотя бы не отрицайте, что алгоритм указывает только на направление решения, а не является решением.

у нас с вами разное понимание слова "алгоритм". Я это понимаю именно как направление. Особенно учитывая, что подробное описание команд с примерами у меня есть, лежит на github'е. Не вижу проблемы.

[nerve]

парни, так какое универсальное решение для замены по шаблону нескольких строк?

Код: Выделить всё

abc
def    на   ххх
ghi

заменить во всем/всех файлах три строки с шаблоном из букв на строку с ххх

[drBatty]

парни, так какое универсальное решение для замены по шаблону нескольких строк?

см. http://emulek.github.io/sed/ch04s07.html

вот Пример 4.9, там текст делится на предложения. "Предложения" там == любые посл. символов, которые кончаются [.?!].

и да, ещё один способ: http://emulek.github.io/sed/ch04s09.html