Решено: Сравнение 2-х файлов

[SelF]

Сравниваю два файла:

Код: Выделить всё

diff file1 file2 > result

file1 и file2 - список файлов в двух хранилищах. Длиной порядка 12 Мб каждый.
result - здесь должен быть список файлов, которые есть в первом, но отсутствуют во втором хранилище. Их порядка 10 000 штук

Проблема в том, что результирующий файл равен по объему исходному файлу и в нем записаны все файлы, а не те, которые отсутствуют.

Вопрос:
Как сравнить два файла и строки, которые различаются, записать в отдельный файл?

С уважением.

[IMB]

Код: Выделить всё

$ cat /tmp/1
blank.php
calc.php
change-status.php
contragent-naryad.php
contragent.php
database1.php
database2.php
database3.php
database4.php
database.php
edit1.php
edit2.php
edit3.php
edit4.php
edit.php
info.php
logout.php
main.php
menu.php
message.php
new1.php
new2.php
new3.php
new4.php
new5.php
new.php
new-zakaz.php
ready.php
remont1.php
remont2.php
remont3.php
remont4.php
remont-act.php
remont.php
search.php
sklad.php
stat1.php
stat2.php
stat.php
test.php
user.php
vector.php

Код: Выделить всё

$ cat /tmp/2
blank.php
calc.php
change-status.php
contragent-naryad.php
contragent.php
database1.php
database2.php
database3.php
database4.php
database.php

Код: Выделить всё

$ diff /tmp/1 /tmp/2 | awk '{print $2}' | grep -v ^$
edit1.php
edit2.php
edit3.php
edit4.php
edit.php
info.php
logout.php
main.php
menu.php
message.php
new1.php
new2.php
new3.php
new4.php
new5.php
new.php
new-zakaz.php
ready.php
remont1.php
remont2.php
remont3.php
remont4.php
remont-act.php
remont.php
search.php
sklad.php
stat1.php
stat2.php
stat.php
test.php
user.php
vector.php

Вопрос больше относится к Работа в командной строке

[KiWi]

comm

[SelF]

IMB, ОГРОМНОЕ СПАСИБО!!!

P.S. Жаль что на форуме нет рейтингов - поставил бы по максимуму!

[deadhead]

зато есть кнопочка спасибо ;-)

[SelF]

зато есть кнопочка спасибо ;-)

Спасибо за "спасибо"!

[SelF]

Хм.. Странно.Сейчас запускаю ту же команду - в результате получаю склееный файл из двух сравниваемых:
diff f1 f2 | awk '{print $2}' | grep -v ^$ > diff_f

Что может быть не так?

[KiWi]

Хм.. Странно.Сейчас запускаю ту же команду - в результате получаю склееный файл из двух сравниваемых:
diff f1 f2 | awk '{print $2}' | grep -v ^$ > diff_f

Что может быть не так?

Да сделайте уже comm -23 f1 f2 и получите строки, уникальные для f1.

[SelF]

comm -23 f1 f2 > dif

ls -la:
6656604 Oct 23 02:43 dif
6656604 Oct 22 17:09 f1
6993014 Oct 22 17:34 f2

не выводит

[KiWi]

Что в f1 и f2?

[SelF]

Что в f1 и f2?

список файлов из двух удаленных хранилищ вида s3://videos/0003E.mp4

задача стоит синхронизировать изменения в f1 для f2.

[KiWi]

список файлов из двух удаленных хранилищ вида s3://videos/0003E.mp4

Каков вопрос -- такой и ответ: в файлах нет общих строк.

[SelF]

список файлов из двух удаленных хранилищ вида s3://videos/0003E.mp4

Каков вопрос -- такой и ответ: в файлах нет общих строк.

В том-то и дело, что есть.
В хранилище 2 ранее были перекинуты файлы из хранилища 1

[/dev/random]

В том-то и дело, что есть.
В хранилище 2 ранее были перекинуты файлы из хранилища 1

А разве это означает наличие _полностью_ одинаковых строк? По идее, у этих строк одинаковыми должны быть только "хвосты", после последнего слэша.