Очистить файл до N строки

[Grih65kop]

Необходимо очистить файл до, например, до 5 строчки с конца.
Я представляю что можно их вывести tail -5 file, но вот как теперь очистить все кроме них.

[SLEDopit]

Я представляю что можно их вывести tail -5 file, но вот как теперь очистить все кроме них.

т.е. вам нужно чтобы изменения записались в сам файл?
тогда так:

Код: Выделить всё

sed -i -e :a -e '$q;N;6,$D;ba' file

[/dev/random]

TMP=$(mktemp)
tail -5 file > "$TMP"
cat "$TMP" > file
rm -f "$TMP"

[Grih65kop]

TMP=$(mktemp)
tail -5 file > "$TMP"
cat "$TMP" > file
rm -f "$TMP"

Необходимо без создания нового файла т.е. файл уже существует, нужно его имя и что бы остались его права.

Я представляю что можно их вывести tail -5 file, но вот как теперь очистить все кроме них.

т.е. вам нужно чтобы изменения записались в сам файл?
тогда так:

Код: Выделить всё

sed -i -e :a -e '$q;N;6,$D;ba' file

Спасибо, работает, только я не совсем понимаю. Не могли бы вы более подробно описать?

[/dev/random]

Необходимо без создания нового файла т.е. файл уже существует, нужно его имя и что бы остались его права.

У меня так и делается. Создаётся временный файл, а потом его содержимое пишется поверх старого файла, без изменения его имени и прав.

Кстати, "sed -i" тоже создаёт временный файл.

[SLEDopit]

Необходимо без создания нового файла т.е. файл уже существует, нужно его имя и что бы остались его права.

Ну вообще то sed -i тоже создает новый временный файл, а потом удаляет его (:

Спасибо, работает, только я не совсем понимаю. Не могли бы вы более подробно описать?

Вам принцип работы или того, что вместо 6 нужно подставлять "необходимое количество строк +1", будет достаточно? (:

upd

Кстати, "sed -i" тоже создаёт временный файл.

эх, долго ответ я писал.

[Grih65kop]

Необходимо без создания нового файла т.е. файл уже существует, нужно его имя и что бы остались его права.

Ну вообще то sed -i тоже создает новый временный файл, а потом удаляет его (:

Спасибо, работает, только я не совсем понимаю. Не могли бы вы более подробно описать?

Вам принцип работы или того, что вместо 6 нужно подставлять "необходимое количество строк +1", будет достаточно? (:

upd

Кстати, "sed -i" тоже создаёт временный файл.

эх, долго ответ я писал.

Конечно же сам принцип.

[Grih65kop]

Существует ли способ без создания временного файла? Представляю что можно считывать в массив, но это не вариант при работе с большими файлами.

[/dev/random]

Существует ли способ без создания временного файла? Представляю что можно считывать в массив, но это не вариант при работе с большими файлами.

В теории - да. Но его реализация на шелле будет ужасно длинной и неэффективной.
Для этого нужно:
* подсчитать объём D (в байтах) удаляемых строк
* L - объём остальной части файла
* перенести (например, с помощью dd) L байт, начиная с D, в начало файла
* обрезать файл до объёма L

На C это можно сделать достаточно эффективно, но не на шелле.

[SLEDopit]

Конечно же сам принцип.

:a - ставим метку a
N - считываем следующую строку (фактически получаем 1 строку из двух с '\n' в середине для дальнейшшей работы D)
4,$D - удаляем все до первого '\n' (подробнее о работе D)
ba - переходим к метке а и повторяем все заново

может немного коряво объяснил, но как-то так.

Существует ли способ без создания временного файла?

если не секрет, чем так мешают временные файлы?

[drBatty]

Ну вообще то sed -i тоже создает новый временный файл, а потом удаляет его (:

как я понял, она удаляет старый файл, а временный переименовывает.
ключ -i допускает параметр - новое имя для старого файла, тогда старый файл не удалится, а переименуется.

PS: в info sed есть эмуляция tail. И как любая эмуляция, она намного медленнее.

Я всё-же проверил: получилось для первого скрипта 18.5 сек., а для второго 6.4 сек. Таким образом второй скрипт работает примерно в 3 раза быстрее. Для сравнения: tail сработала за 2.3 секунды (ага - эта задача явно не для sed, sed вообще ни в коем случае нельзя использовать, когда есть другая утилита, заточенная именно на эту задачу - что-же вы хотели, та-же tail выделяет в самом начале памяти под 10 строк, и просто читает туда данные, нам-же приходится для каждой строки удалять первую - для чего необходимо сдвинуть остальные - т.о. нам нужно не только прочитать N байт(одну строку), переместить N*10 байт! Если-бы файл был в памяти, то sed сработала-бы не в три раза, а в 11 раз медленнее! (кстати, похоже он и был в памяти(файл в 18Мб, свободно около 200), видимо для сдвига строк (D) sed применяет следующую оптимизацию: вместо того, что-бы сдвигать весть буфер, она просто считает, что после команды D буфер начинается не с первой, а со второй строки, надо исходник глянуть). В любом случае, двигать буфер на каждой строке без особой на то необходимости - плохая идея.) Проблема sed в данном случае: невозможность загружать строки в произвольное место буфера, мы можем только добавлять в конец буфера, или полностью заменить строку. С другой стороны, значительного увеличения быстродействия можно было-бы достичь другим путём: прочитать все строки, а после этого вернутся на 10 строк назад, если известна максимальная длинна строки(M), то это сделать довольно просто: посчитать все строки, а затем вернутся на M*10 байтов назад и найти десятую строчку, я, правда не знаю, чем возвращаться, разве что той-же tail с ключом -c.

[Nazyvaemykh]

Поправьте ссылку плз. То, что у Вас написано info sed, выдает 404.