python-magic模块报错无valid magic files问题

magic.MagicException: b'could not find any valid magic files!

注意：本情况极其小众，最终将python移到非中文目录下解决了问题。

结论：将python的库目录更改到全英文文件夹

起初，我在mac上使用magic模块识别文件类型。之后我想把它放在windows上用

然后问题就出现了，请看测试代码的报错

import magic
m =  magic.Magic(mime=True)
print(m)

Traceback (most recent call last):
  File "t.py", line 4, in <module>
    m =  magic.Magic(mime=True)
  File "magic.py", line 71, in __init__
    magic_load(self.cookie, magic_file)
  File "magic.py", line 272, in magic_load
    return _magic_load(cookie, coerce_filename(filename))
  File "magic.py", line 203, in errorcheck_negative_one
    raise MagicException(err)
magic.MagicException: b'could not find any valid magic files!'

没有magic files，查了一番之后，在官网

https://pypi.org/project/python-magic/

：找到了这样一句话：
 

Windows
You'll need DLLs for libmagic. @julian-r maintains a pypi package with the DLLs, you can fetch it with:

pip install python-magic-bin

这是什么原因造成的呢，magic files是linux相关设备自带的一个文件，用于类型识别。

这个错误在官网里面也写了：

Troubleshooting
'MagicException: could not find any magic files!': some installations of libmagic do not correctly point to their magic database file. Try specifying the path to the file explicitly in the constructor: magic.Magic(magic_file="path_to_magic_file").

而windows不自带，所以这个库里面包含了一个dll，常理来说这样就可以用了

但是 事情没有这么简单，不知道为什么 还是不行

回到前面的Troubleshooting，既然这样，我能不能直接指定一个magic文件呢？
试错：

https://github.com/pidydx/libmagicwin64

按照要求操作，下载了文件到C:\Windows\System32下，并且引用

m = magic.Magic(magic_file=r"C:/Windows/System32/magic.mgc")

magic.py", line 203, in errorcheck_negative_one
    raise MagicException(err)
magic.MagicException: b'could not find any valid magic files!'

试错：于magic文件下看到路径

['/opt/local/lib/libmagic.dylib',
                                  '/usr/local/lib/libmagic.dylib']

尝试于mac下找文件复制，无效

实在没办法后，在朋友的笔记本上试了一下，发现都可以运行。这时我才意识到可能是我的环境除了问题，折腾半天重装了python之后发现仍然没用。

最后，又回归本源到源码。在调用magic file的代码下找到了一个名为coerce_filename的函数。其中看到了这么一句话之后我心中凉了半截：

    if is_unicode:
        return filename.encode('utf-8')

在前面它自动获取了库下magic.mgc的路径（这个就是magic文件），并且做了判断，由于我是默认安装在user目录下。好巧不巧的是我的user是用中文命名的。于是乎，这里就被编码了。

亲，文件路径被编码？？！

急忙将库路径改到非中文下后，重新运行，一切正常！

结论：将python的库目录更改到全英文文件夹、

注意：本情况极其小众，最终将python移到非中文目录下解决了问题。

复盘总结：这个问题我真的画了非常多时间找，从国庆前找到了国庆后（当然国庆偷懒去了）

我在找问题的时候由于csdn找了半天都没有找到。就魔怔了一半用英语狂搜github，英语搜结果自然找不到这种小众的bug。最终还是跟着debug一步步看发现的。至于为什么会注意到coerce_filename函数。这个是因为在debug中看到了被编码过的路径，灵光一闪感觉不对劲（因为之前也有用过中文路径，那种情况下debug是不会出现路径名被编码的）