Новые вопросы с тегом «deduplication»

У меня есть устройство резервного копирования Exagrid EX5000 с накопителем на 9 ТБ, и оно заполняется ; когда я иду на общий диск, он показывает только 2,8 ТБ свободного места. Я использую этот Exagrid EX5000 для резервного копирования Veeam. Как освободить место на диске Exagrid EX5000? [root@RFEx...

Я ищу способ перезаписать только те части файла, которые отличаются от того, что должно быть записано в него, чтобы файл был изменен с наименьшим количеством записей на диск. Мой план состоит в том, чтобы сделать небольшую дедупликацию, в то время как я делаю резервную копию своего раздела NTFS в фа...

При неудачном восстановлении OneDrive у меня осталось много файлов и папок с суффиксом «(1)» или «(2)». Я хотел бы сценарий (Bash хорошо, так как у меня есть MinGW + Cygwin или PowerShell), который будет анализировать все файлы и папки в данной папке (например, "d: \ OneDrive" или "/ cygdrive / d /...

Синхронизация между моим Файловым потоком Google, Google Диском и Synology CloudSync и все перепуталось, и у меня остались сотни дубликатов папок с именем папки, за которыми следуют "(1)" или "(2)" и т. Д., И до "(1) (1) (1)". Знаете ли вы о программе или сценарии, которые могут объединить эти папк...

Есть ли способ Linux или инструмент, который знает о дедупликации Windows в NTFS? Здесь я использую rsync для синхронизации файлов с общих файловых серверов AD. Общие ресурсы монтируются только для чтения с помощью mount.cifs в Linux. Поскольку Linux не знает о дедуплицированных файлах, он синхрониз...

На этой странице рассказывается, как удалить файлы в каталоге B, которые также существуют в каталоге A. Я хочу использовать решение для Windows, но без копирования. Может кто-нибудь сказать мне, как отредактировать строку FOR, чтобы просто сделать сравнение, а затем удалить? Спасибо.

Как заменить файлы dst/, которые точно совпадают по содержанию с файлами src/с жесткими ссылками на эти ( src/*) файлы? Есть --hard-linksвариант rsync, который я хочу использовать, но я не хочу прикасаться к измененным файлам, просто чтобы минимизировать потерю дискового пространства. Можно ли дости...

У меня есть диск, который оторвался от мертвого сервера. Это явно дедуплицировано - классические ошибки 1305, 80070519 и «плохая ревизия», когда я пытаюсь скопировать файлы, показывают это. Я пробовал каждую установку Windows Server, на которую могу положиться, чтобы скопировать файлы на новый серв...

Я ищу способ (не включая платное программное обеспечение) для поиска всех папок, которые содержат только файлы, которые также находятся по крайней мере в одной другой подпапке родительского каталога. При использовании в музыкальной библиотеке, это будет список всех альбомов компиляции. Структура фай...

Windows Server 2012 R2 (редакция центра обработки данных) Я не могу включить дедупликацию данных. На этом конкретном томе ранее была включена дедупликация данных. Компьютер был изменен с BIOS на загрузку UEFI, поэтому Windows была переустановлена, а загрузочный диск изменился. Однако я получаю ту же...

У меня есть много изображений, которые имеют все одинаковые метаданные (размер, само изображение и т. Д.), И единственное различие между ними - это имена файлов. Скажем, у меня есть 10 изображений, которые выглядят одинаково, я хочу оставить только 1 из них. Неважно, какой. Остальные 9 должны быть у...

Мне нужно удалить дубликаты на моем компьютере, так как у меня есть около 5 копий каждой фотографии в разных папках. Я хочу удалить фотографии, которые также появляются в определенной папке, ведь я отсортировал их несколько. Я хочу, чтобы он сохранял файлы в папке, а также сохранял дубликаты, которы...

Мне нужно программное обеспечение для резервного копирования, которое выполняет шифрование на стороне клиента. В документации Borg указано, что она выполняет шифрование на стороне клиента, и, в конце концов, если хранилище является удаленным, добавляется еще один уровень шифрования, если используетс...

У меня есть куча файлов (4800 файлов), которые, как я считаю, содержат много дубликатов и троек. Проблема в том, что они также не имеют одинаковые имена. Я уже отсеял легких с такими же именами. Все файлы имеют узкий диапазон размеров, так что это не поможет. Я подумал, что, возможно, можно было бы...

Я пытаюсь дедуплицировать лабиринтную директорию, но продолжаю получать результаты для содержимого элементов, которые я хочу сопоставить, а не самих включающих элементов, т.е. мои результаты полны таких вещей, как файлы .css и .strings из непревзойденных пакетов '.app'. Я не могу ограничиться рекур...

У меня есть сотни тысяч файлов, распределенных на многих внешних дисках и дисках компьютеров, и многие из них дублированы. Этот беспорядок был вызван тем, что я создал копии для предложения по безопасности. Время от времени я менял структуру каталогов моей организации, но не копировал в других места...

Каков порядок записи данных в файловую систему zfs в zfs в linux? Единственный конкретный документ, который я нашел на http://docs.oracle.com/cd/E36784_01/html/E36835/gkknx.html, говорит;When a file is written, the data is compressed, encrypted, and the checksum is verified. Then, the data is dedupl...

Я пытаюсь создать сводную таблицу для подсчета количества событий, которые посетил человек. В приведенном ниже примере я хотел бы удалить дубликаты, связанные с конкретным человеком. Джойс указан правильно, но Шарон указан как посетивший Событие 1, два раза. В сводной таблице это даст ей счет посети...

Привет, эксперты и сокурсники! У меня есть десятки текстовых файлов, которые содержат ежемесячные архивы рассылки. Я пытаюсь удалить / удалить цитируемые ответы, чтобы каждое сообщение появлялось только один раз во всех файлах. Большинство пользователей списка не используют встроенные кавычки, так ч...

Я пытаюсь включить дедупликацию данных на диске C:, но диспетчер сервера не позволяет мне это делать. После использования команды PowerShell он дал мне следующее сообщение: Windows PowerShell Copyright (C) 2014 Microsoft Corporation. All rights reserved. PS C:\Windows\system32> Import-Module Ded...

У меня два диска - диск D: и диск F :. Оба эти диска локально подключены к компьютеру с Server 2012. диск F - это устаревшее хранилище данных, мигрирующих на новый диск (D) по мере его увеличения. Дедупликация данных была включена на диске D до синхронизации файлов из F в D. Robocopy / MIR повредил...

Если у меня есть текстовый файл, я могу отсортировать его по команде sort input.txt output.txt. Можно ли как-то также удалить дубликаты строк из текстового файла? (В идеале я хотел бы получить решение, которое можно сделать в командном файле под Windows.) Это в основном то же самое, что спрашивать,...

Я знаю, что установка dedup=onвызывает высокое использование памяти и что это почти никогда не стоит (см., Например, https://serverfault.com/a/569099/208661 ). Однако я включил его, чтобы посмотреть, как он работает, и поместил 20 ГБ в пул на 1,4 ТБ с кешем. Потребление памяти (разница в использован...

Мне нужно выполнить 2 операции в Sublime Text: извлечь уникальные строки и извлечь дубликаты строк. Например для ввода a b a Извлечение дубликатов должно привести к: a и Извлечение уникального должно привести к: b Есть ли встроенная операция или плагин для этого?

У меня есть около 100 ТБ сжатых данных GZIP на облачных томах. По пути запуска дедупликации на уровне блоков (duperemove для btrfs) я обнаружил, что она была сжата без -n, что приводит к разнице в уровне блоков сжатого вывода для идентичных файлов, в остальном идентичных. Помимо повторного сжатия вс...

Можно ли включить дедупликацию для одной папки (и подпапок), а не для всего тома? Примечание: я использую Windows 10 1607 с установленным модулем дедупликации.

Как я могу перечислить все zip-файлы и их извлеченные папки, чтобы удалить один из них, я скачал много zip-файлов за годы (как и все) и извлек их, так что теперь они занимают вдвое больше места, чем должны.

Я ищу способ удаления файлов на основе их контрольной суммы, совпадающей со списком ранее увиденных контрольных сумм в текстовом файле или каким-либо другим списком. Контекст представляет собой крупный проект по организации фотографий, где мне будут приходить данные из многих источников, часто с дуб...

У меня есть текстовый файл, который может содержать до 13 000 000 случайно сгенерированных кодов, разделенных с "\ n" функцией fputcsv в php. Каков наиболее эффективный способ удаления дубликатов из этого файла? Спасибо!

Мой дядя - фотограф с большим количеством фотосессий. Он хранил (дублирует) резервные копии на различных внешних жестких дисках. 90% всех резервных копий одинаковы, но некоторые имеют некоторые изменения, такие как добавленные файлы или фотографии с фотошопом. Теперь я получил ему NAS с настройкой R...