Подборка 110 вопросов с тегом «deduplication» на WikiRoot: ответы IT-специалистов по Windows, Linux, Excel, сетям и программированию.
110 вопросов
У меня есть устройство резервного копирования Exagrid EX5000 с накопителем на 9 ТБ, и оно заполняется ; когда я иду на общий диск, он показывает только 2,8 ТБ свободного места. Я и...
Я ищу способ перезаписать только те части файла, которые отличаются от того, что должно быть записано в него, чтобы файл был изменен с наименьшим количеством записей на диск. Мой п...
Ответ: Вот один скрипт, который работает и достаточно эффективен. Обратите внимание, что для работы требуется ровно один пробел до «(1)», а после - ни один. #!/usr/bin/bash IFS=$'\n'; set...
Ответ: Ниже приведен скрипт bash, который выполняет эту задачу. Работает, например, на MSYS2 Bash с добавленным rsync. Это взято из этого связанного вопроса здесь: Скрипт для дедупликации...
Ответ: Если ваша цель - выполнять резервное копирование, не тратя пространство на дубликаты файлов, рассмотрите возможность резервного копирования на другой дедуплицированный диск на друг...
На этой странице рассказывается, как удалить файлы в каталоге B, которые также существуют в каталоге A. Я хочу использовать решение для Windows, но без копирования. Может кто-нибуд...
Ответ: Я думаю, что вы хотите, программа, как fslint, fdupes, duff, rdfindнайти дубликаты, а затем освободить дублированный дисковое пространство со ссылками. Вы можете взять список дубли...
У меня есть диск, который оторвался от мертвого сервера. Это явно дедуплицировано - классические ошибки 1305, 80070519 и «плохая ревизия», когда я пытаюсь скопировать файлы, показы...
Ответ: Вы можете использовать PowerShell! $dupes = gi $args[0] | gci -File -Recurse | group Name | ? {$_.Count -gt 1} gi $args[0] | gci -Directory | ? { $allDupes = $true $hasAny = $false...
Ответ: Я удалил и повторно добавил роли / функции Hyper-V и Data Deduplication, и это, похоже, исправило проблему. Я не уверен, почему или что произошло, но я полагаю, что некоторые настр...
Ответ: Я нашел приложение, которое делает это; это называется VisiPics: http://www.visipics.info/ VisiPics делает больше, чем просто ищет идентичные файлы, он выходит за рамки контрольных...
Ответ: Предполагая dir1, что путь, который вы хотите найти и dir2быть определенная папка : find dir1 -not -path "dir2/*" | grep -F -f <(ls -1 dir2) | parallel rm или, если только у вас...
Ответ: Борг хранит локальный кеш контрольных сумм (кусков) данных, зарезервированных. С этим можно ознакомиться до шифрования, что делает решение о дедупликации клиентской функцией, на ко...
Ответ: Вот команда Powershell, которая хэширует все ваши файлы (в заданном каталоге) и выводит результат в файл CSV. Get-FileHash -Algorithm MD5 -Path (Get-ChildItem "\\Path\to\files\*.*"...
Ответ: Попробуйте использовать утилиту "find", чтобы исключить эти файлы, а затем передайте результат в rmlint: $ find /target/dir -type f ! -name '*.nib' ! -name '*.icon' ! -name '*.plis...
Ответ: Предполагая, что вы можете использовать Windows в качестве ОС для всего процесса и вам не нравится Free Duplicate File Finder (никогда не пробовал, но нашел его здесь упомянутым ),...
Ответ: Получается, что http://docs.oracle.com/cd/E36784_01/html/E36835/gkknx.html прав. Когда файл записывается, данные сжимаются, шифруются, и контрольная сумма проверяется. Затем данные...
Ответ: Используйте команду «Удалить дубликаты» на вкладке «Данные» и убедитесь, что у моих данных есть заголовки в разделе «Столбцы», проверьте только 2 столбца: ФИО Событие затем Ok удал...
Привет, эксперты и сокурсники! У меня есть десятки текстовых файлов, которые содержат ежемесячные архивы рассылки. Я пытаюсь удалить / удалить цитируемые ответы, чтобы каждое сообщ...
Ответ: Дедупликация данных не поддерживается на загрузочных или системных дисках: Дедупликация была построена для томов данных NTFS и не поддерживает загрузочные или системные диски Введе...
Ответ: Ниже работает довольно хорошо; Get-ChildItem -Recurse -File | Where-Object { $_.Attributes -match "ReparsePoint" } | Foreach-Object { $currentFileName = $_.FullName $oldFileName =...
Ответ: Пакетно отсортировать файл с удалением дубликатов строки? Ниже приведен пакетный скрипт для Windows, как вы и просили, чтобы выполнить эту задачу; просто установите ваши входные и...
Ответ: Если предположить, что ваши проблемы связаны с дедупликацией, это не очень поможет, поскольку только новые данные не дублируются, старые данные остаются дедуплицированными и таблиц...
Ответ: Вы можете легко найти повторяющиеся строки, выполнив Sort Linesзатем поиск по этому регулярному выражению, в котором используются маркеры границы строк ^и $обратная ссылка \1. ^(.+...
Ответ: Отвечая на первую половину моего вопроса о том, как: вырезать штамп даты / имени файла gzip. нет, я еще не нашел готовый кусок кода, но я нашел время для установки vbindiff, визуал...
Можно ли включить дедупликацию для одной папки (и подпапок), а не для всего тома? Примечание: я использую Windows 10 1607 с установленным модулем дедупликации.
Ответ: From the Terminal.app unzip -l file.zip will list the content of the archive. Other options could be to use zcat or jar.
Я ищу способ удаления файлов на основе их контрольной суммы, совпадающей со списком ранее увиденных контрольных сумм в текстовом файле или каким-либо другим списком. Контекст предс...
Ответ: Я думаю, что проблема здесь в том, что в Excel есть ограничение в 1 048 576 строк, а в вашем наборе данных 13 миллионов записей. Каждая запись должна быть на отдельной строке. Если...
Ответ: You can compute checksums on originals/copies and compare to see if anything has been changed. This link explains it a bit more and offers some tools to help.
Ctrl+K или / — быстрый поиск Начните вводить запрос для поиска по сайту