Назад | Перейти на главную страницу

Получить список переданных файлов из rsync?

Я сейчас использую rsync в сценарии, который развертывает приложение PHP с промежуточного сервера на рабочем сервере. Вот как:

rsync -rzai --progress --stats --ignore-times --checksum /tmp/app_export/ root@app.com:/var/www/html/app/

В настоящее время выводится список всех сравниваемых файлов (каждый файл в проекте), но я бы хотел, чтобы он выводил только измененные, поэтому я могу запустить его с помощью --dry-run возможность проверить, что при каждом развертывании обновляются только желаемые файлы.

ПРИМЕЧАНИЕ. Лучшее, что я мог сделать, это grep fcst результаты, но я ищу rsync вариант, что я уверен, что он есть, но я не могу найти его на страницах руководства.

Заранее спасибо!

Использовать --out-format вариант

Согласно странице руководства:

Указание --out-format опция будет упоминать каждый файл, каталог и т. д., который существенно обновляется (переданный файл, воссозданная символическая ссылка / устройство или каталог).

Если вам нужны только фактические имена файлов (--out-format="%n") ваша команда пробного запуска может выглядеть так:

rsync -rzan --out-format="%n" --ignore-times --checksum /tmp/app_export/ root@app.com:/var/www/html/app/

Когда rsync вызывается с -v, он внутренне использует эту опцию с форматом по умолчанию "%n%L", который сообщает вам только имя файла и, если элемент является ссылкой, где она указывает.

Но это также включает краткую сводку в начале и в конце процесса синхронизации.

Чтобы избавиться от этого резюме, используйте --out-format вариант напрямую.

Кстати. -i также внутренне использует --out-format, но с форматом "%i %n%L".

Если есть опция rsync для выполнения именно того, о чем вы просите, я также не нашел ее на странице руководства. :-)

Тем не менее, я не вижу проблемы с выводом вывода rsync -i чтобы разобрать именно то, что вам нужно. Мне это приятно и по-Unixy.

Одна придирка с вашей командой rsync: -r избыточно, как это подразумевается -a.

Начиная с версии rsync v3.1.0, выпущенной в 2013 году, существует --info флаг, позволяющий детально контролировать вывод.

 --info=FLAGS
          This option lets you have fine-grained control over the information output you want to see.  An individual flag name may be followed
          by a level number, with 0 meaning to silence that output, 1 being the default output level, and higher numbers increasing the output
          of that flag (for those that support higher levels).  Use --info=help to see all the available flag names,  what  they  output,  and
          what flag names are added for each increase in the verbose level.  Some examples:

              rsync -a --info=progress2 src/ dest/
              rsync -avv --info=stats2,misc1,flist0 src/ dest/

          Note  that  --info=name’s  output  is  affected  by the --out-format and --itemize-changes (-i) options.  See those options for more
          information on what is output and when.

          This option was added to 3.1.0, so an older rsync on the server side might reject your attempts at fine-grained control (if  one  or
          more  flags  needed  to  be  send to the server and the server was too old to understand them).  See also the "max verbosity" caveat
          above when dealing with a daemon.

Доступные --info флаги:

Use OPT or OPT1 for level 1 output, OPT2 for level 2, etc.; OPT0 silences.

BACKUP     Mention files backed up
COPY       Mention files copied locally on the receiving side
DEL        Mention deletions on the receiving side
FLIST      Mention file-list receiving/sending (levels 1-2)
MISC       Mention miscellaneous information (levels 1-2)
MOUNT      Mention mounts that were found or skipped
NAME       Mention 1) updated file/dir names, 2) unchanged names
PROGRESS   Mention 1) per-file progress or 2) total transfer progress
REMOVE     Mention files removed on the sending side
SKIP       Mention files that are skipped due to options used
STATS      Mention statistics at end of run (levels 1-3)
SYMSAFE    Mention symlinks that are unsafe

ALL        Set all --info options (e.g. all4)
NONE       Silence all --info options (same as all0)
HELP       Output this help message

Options added for each increase in verbose level:
1) COPY,DEL,FLIST,MISC,NAME,STATS,SYMSAFE
2) BACKUP,MISC2,MOUNT,NAME2,REMOVE,SKIP

Фактически, вы как бы ответили на свой вопрос, поскольку в исходной команде он уже есть: --progress

Это правильный вариант, хотя справочная страница немного загадочна:

     --progress              show progress during transfer
 -P                          same as --partial --progress

Это имеет смысл, поскольку вы вызываете rsync string с режимом dryrun, transer не происходит, но у вас все еще есть прогресс: а именно файлы, которые были изменены и будут переданы.

Таким образом вы получите аккуратный небольшой список всех файлов, например:

В месте назначения уже есть копия измененного файла, который был обновлен в исходном и старом файле, который остается неизменным. У источника также есть дополнительный файл: newfile.

#~$ ls -lhan /tmp/destination/
total 20K
drwxrwxr-x  2 1000 1000 4,0K Jän 31 09:07 .
drwxrwxrwt 18    0    0  12K Jän 31 09:15 ..
-rw-rw-r--  1 1000 1000    2 Jän 31 09:08 changedfile
-rw-rw-r--  1 1000 1000    0 Jän 31 09:07 oldfile



#~$ ls -lhan /tmp/source/
total 20K
drwxrwxr-x  2 1000 1000 4,0K Jän 31 09:07 .
drwxrwxrwt 18    0    0  12K Jän 31 09:15 ..
-rw-rw-r--  1 1000 1000    2 Jän 31 09:15 changedfile
-rw-rw-r--  1 1000 1000    0 Jän 31 09:07 newfile
-rw-rw-r--  1 1000 1000    0 Jän 31 09:07 oldfile

Если мы затем вызовем вашу команду rsync, но удалим детализацию -i и просто добавь dryrun -n

#~$ ~$ rsync -n -rza --progress --stats --ignore-times --checksum /tmp/source/ /tmp/destination/
sending incremental file list
changedfile
newfile

Number of files: 4 (reg: 3, dir: 1)
Number of created files: 1 (reg: 1)
Number of deleted files: 0
Number of regular files transferred: 2
Total file size: 2 bytes
Total transferred file size: 2 bytes
Literal data: 0 bytes
Matched data: 0 bytes
File list size: 0
File list generation time: 0.001 seconds
File list transfer time: 0.000 seconds
Total bytes sent: 187
Total bytes received: 22

sent 187 bytes  received 22 bytes  418.00 bytes/sec
total size is 2  speedup is 0.01 (DRY RUN)

Вы получите список только тех файлов, которые rsync будет tranfser: changedfile и newfile.

Не уверен, отличается ли это между используемыми версиями / параметрами, но в версии mys, когда я использую -i вариант я получаю список вроде:

>f..T...... existing-file.png
>f+++++++++ new-file.png
cd+++++++++ new-dir/
>f+++++++++ new-dir/new-file.png

Итак, простое решение для получения только списка фактически переданных файлов просто запускается:

rsync [your options here] | grep -v "f..T......"

Это просто скроет все строки, содержащие f..T....... Таким образом, идентичные файлы будут скрыты.