rulinux.net - Форум - Talks - Re:[красноглазие] А почему ява такое унылое гавно? http://rulinux.net/ rulinux.net - Форум - Talks - Re:[красноглазие] А почему ява такое унылое гавно? http://rulinux.net/ http://rulinux.net/rss_icon.png Re:[красноглазие] А почему ява такое унылое гавно? https://rulinux.net/message.php?newsid=1899&page=1#14716 https://rulinux.net/message.php?newsid=1899&page=1#14716 Fri, 05 Jun 2009 08:00:08 +0400 > Ага, помню-помню.

Сынок, просто надо было rm -i проставить на время отладки ;-)

]]> Re:[красноглазие] А почему ява такое унылое гавно? https://rulinux.net/message.php?newsid=1899&page=1#14714 https://rulinux.net/message.php?newsid=1899&page=1#14714 Thu, 04 Jun 2009 13:23:10 +0400 > find -type f | xargs md5sum | sort | uniq -dw 32 | xargs rm

Ага, помню-помню. Тоже что-то хотел удалить рекурсивно из подмонтированной директории с другой linux-системой. Наворотил какую-то строку и ошибся где-то, забыл указать полный путь. Когда я нажал Сtrl-C, этот скрипт уже удалял файлы в дебрях /usr... Короче, система не взлетела. Это я к тому, что такие скрипты с глобальным удалением всего и вся нужно прежде много раз проверить. А уже только потом пробовать запустить на реальной системе.

]]> Re:[красноглазие] А почему ява такое унылое гавно? https://rulinux.net/message.php?newsid=1899&page=1#14713 https://rulinux.net/message.php?newsid=1899&page=1#14713 Wed, 03 Jun 2009 21:10:51 +0400 > Поиск продолжался около 10 часов, при этом жутко грузило проц и наблюдались жуткие тормоза.

сколько у тя оперативы?

> Интерфейс у неё настолько убог, что сразу было видно какой кулхацкер её делал.

бвахахах!

Я пользовался для этих целей самописным скриптом на лиспе, настрочить показалось проще чем готовое йскать.

]]> Re:[красноглазие] А почему ява такое унылое гавно? https://rulinux.net/message.php?newsid=1899&page=1#14712 https://rulinux.net/message.php?newsid=1899&page=1#14712 Wed, 03 Jun 2009 20:25:29 +0400 Вроде работает. Вот только sha1sum вроде быстрее

]]> Re:[красноглазие] А почему ява такое унылое гавно? https://rulinux.net/message.php?newsid=1899&page=1#14711 https://rulinux.net/message.php?newsid=1899&page=1#14711 Wed, 03 Jun 2009 19:53:05 +0400 да уж, твоя команда явно короче моей проги =)

]]> Re:[красноглазие] А почему ява такое унылое гавно? https://rulinux.net/message.php?newsid=1899&page=1#14710 https://rulinux.net/message.php?newsid=1899&page=1#14710 Wed, 03 Jun 2009 19:52:25 +0400 запускать так: perl find.pl /var/www/html/images

]]> Re:[красноглазие] А почему ява такое унылое гавно? https://rulinux.net/message.php?newsid=1899&page=1#14709 https://rulinux.net/message.php?newsid=1899&page=1#14709 Wed, 03 Jun 2009 19:51:24 +0400 http://212.152.36.162/images/find.pl.txt

правда она лишь выводит на печать одинаковые по md5 сумме файлы, соответственно можно там какойннить unlink вставить на файлы. правда она держит в памяти хэш, который может пожрать всю оперативку.

]]> Re:[красноглазие] А почему ява такое унылое гавно? https://rulinux.net/message.php?newsid=1899&page=1#14708 https://rulinux.net/message.php?newsid=1899&page=1#14708 Wed, 03 Jun 2009 19:46:11 +0400 Вот третья версия. Предыдущая будет корректно работать только если есть не более двух одинаковых файлов.

find -type f -print0 | xargs -0 md5sum | sort | uniq –all-repeated=prepend -w 32 | sed -r '/^$/{N; d}; s,^w+ *,,; s,$,x0,' | xargs -0 rm

Виноват, после напряжённого рабочего дня соображалка уже плохо работает. Но вообще такие задачи обычно удобнее всего решать подобными скриптами, разумеется, с предварительной отладкой.

]]> Re:[красноглазие] А почему ява такое унылое гавно? https://rulinux.net/message.php?newsid=1899&page=1#14707 https://rulinux.net/message.php?newsid=1899&page=1#14707 Wed, 03 Jun 2009 19:28:36 +0400 Слегка поторопился, и ещё надо учесть пробелы в именах файлов:

find -type f -print0 | xargs -0 md5sum | sort | uniq -dw 32 | sed -r 's,^w+ *,,; s,$,x0,' | xargs -0 rm

Но идея, думаю, понятна и вряд ли это будет медленнее других возможных решений.

]]> Re:[красноглазие] А почему ява такое унылое гавно? https://rulinux.net/message.php?newsid=1899&page=1#14706 https://rulinux.net/message.php?newsid=1899&page=1#14706 Wed, 03 Jun 2009 18:10:23 +0400 Э...

find -type f | xargs md5sum | sort | uniq -dw 32 | xargs rm

?

]]> [красноглазие] А почему ява такое унылое гавно? https://rulinux.net/message.php?newsid=1899&page=1#14715 https://rulinux.net/message.php?newsid=1899&page=1#14715 Wed, 03 Jun 2009 18:10:23 +0400 Коротко суть задачи: в результате работы skynet скопилось около 20 гб сравнительного мелких файлов. Задача простая до безобразия: нужно найти и удалить дублирующиеся файлы. Делается это довольно легко. Для каждого файла вычисляется, например, md5 и по списку ищутся одинаковые.

Первым делом заюзал http://duplicatefilessearcher.net/ Поиск продолжался около 10 часов, при этом жутко грузило проц и наблюдались жуткие тормоза. Ждать до конца у меня просто не хватило терпения.

Следующая на очереди была закрытая платная поделка под венду http://www.funduc.com/dupfiles.htm Интерфейс у неё настолько убог, что сразу было видно какой кулхацкер её делал. К моему счастью там был триальный срок. Какого же было моё удивление, когда под вайном это поделие выполнило задачу примерно за 30 минут. Я конечно понимаю, что ява - УГ, но чтобы на столько. Из-за этого мну бешено негодует и сносит яву.

ЗЫЖ дабы остановить меня от клепания велосипедов, посоветуйте аналогичную, но нативную прогу.

]]>