Назад | Перейти на главную страницу

Странная кодировка имени файла

У меня странная проблема с именем файла. Краткое изложение ситуации:

[username@xxx tmp]$ ll
-rw-r--r--. 1 xxx xxx 42694  8. Jun 19:56 12287_KKL_Messegerät_EF_30.1.pdf
-rw-r--r--. 1 xxx xxx 42694  8. Jun 19:56 12287_KKL_Messegerät_EF_30.1.pdf

Фактически, имя и содержимое двух файлов идентичны. Источник, откуда взят файл, содержит несколько похожих файлов. Чтобы воспроизвести, вот пример:

$ mount
/dev/vda1 on / type ext4 (rw,noatime,nodiratime,grpquota)
$ touch ä
$ ll ä
-rw-r--r--. 1 xxx xxx 0  8. Jun 19:59 ä

Так что в целом умлауты работают. Теперь я удаляю файлы в каталоге и копирую странный файл в пустой каталог:

[username@xxx tmp]$ rm *
[username@xxx tmp]$ cp /tmp/12287_KKL_Messegerät_EF_30.1.pdf .
[username@xxx tmp]$ ll 12287*
-rw-r--r--. 1 xxx xxx 42694  8. Jun 20:01 12287_KKL_Messegerät_EF_30.1.pdf
[username@xxx tmp]$ ll 12287_KKL_Messegerät_EF_30.1.pdf
ls: Zugriff auf 12287_KKL_Messegerät_EF_30.1.pdf nicht möglich: Datei oder Verzeichnis nicht gefunden

Это означает, что прямой доступ к файлу не работает. Однако, если я переименую его туда и обратно, он работает:

[username@xxx tmp]$ mv 12287_KKL_Messegerät_EF_30.1.pdf 12287_KKL_Messegerät_EF_30.1.pdf_
[username@xxx tmp]$ mv 12287_KKL_Messegerät_EF_30.1.pdf_ 12287_KKL_Messegerät_EF_30.1.pdf
[username@xxx tmp]$ ll 12287_KKL_Messegerät_EF_30.1.pdf
-rw-r--r--. 1 xxx xxx 42694  8. Jun 20:01 12287_KKL_Messegerät_EF_30.1.pdf
[username@xxx tmp]$

Есть идеи, что происходит?

-- ОБНОВИТЬ --

Вывод / proc / mounts:

$ cat /proc/mounts
rootfs / rootfs rw 0 0
proc /proc proc rw,relatime,hidepid=2 0 0
sysfs /sys sysfs rw,seclabel,relatime 0 0
devtmpfs /dev devtmpfs rw,seclabel,relatime,size=12292684k,nr_inodes=3073171,mode=755 0 0
devpts /dev/pts devpts rw,seclabel,relatime,gid=5,mode=620,ptmxmode=000 0 0
tmpfs /dev/shm tmpfs rw,seclabel,relatime,size=12302624k,nr_inodes=3075656 0 0
/dev/vda1 / ext4 rw,seclabel,noatime,nodiratime,barrier=1,stripe=128,data=ordered,grpquota 0 0
none /selinux selinuxfs rw,relatime 0 0
devtmpfs /dev devtmpfs rw,seclabel,relatime,size=12292684k,nr_inodes=3073171,mode=755 0 0
/proc/bus/usb /proc/bus/usb usbfs rw,relatime 0 0
tmpfs /var/lib/php-sessions tmpfs rw,rootcontext=system_u:object_r:var_lib_t:s0,seclabel,relatime,size=9784216k,nr_inodes=2446054,mode=1333 0 0
none /proc/sys/fs/binfmt_misc binfmt_misc rw,relatime 0 0
/etc/auto.misc /misc autofs rw,relatime,fd=7,pgrp=6943,timeout=300,minproto=5,maxproto=5,indirect 0 0
-hosts /net autofs rw,relatime,fd=13,pgrp=6943,timeout=300,minproto=5,maxproto=5,indirect 0 0
sunrpc /var/lib/nfs/rpc_pipefs rpc_pipefs rw,relatime 0 0

-- ОБНОВИТЬ --

Действительно, файлы имеют разные inodes:

26346402 -rw-r--r--. 1 xxx xxx  42694  8. Jun 19:49 12287_KKL_Messegerät_EF_30.1.pdf
26360081 -rw-r--r--. 1 xxx xxx  42694 30. Mai 2012  12287_KKL_Messegerät_EF_30.1.pdf

С помощью всех комментариев я написал скрипт на Python для рекурсивной нормализации всех файлов:

#!/usr/bin/env python
# coding=utf-8
import unicodedata
import sys,os

# Walks recursively through directory and normalizes all filenames to NFC

for dirPath, subdirList, fileList in os.walk(sys.argv[1]):
    for fname in fileList:
        d = os.path.join(dirPath, fname)
        filename = unicodedata.normalize('NFC', unicode(d, 'utf-8')).encode('utf-8')
        print d, "=>", filename
        os.rename(d, filename)

Спасибо всем!