代码之家  ›  专栏  ›  技术社区  ›  Nils Fagerburg

如何与iPython合作?

  •  7
  • Nils Fagerburg  · 技术社区  · 16 年前

    我得到的错误是:

    有人知道如何让它工作,或者至少有一个在iPython中加载对象以交互浏览它们的解决方法吗?

    我有一个名为world.py的脚本,基本上可以:

    import pickle
    class World:
        ""
    if __name__ == '__main__':
        w = World()
        pickle.dump(w, open("file", "wb"))
    

    而不是在REPL中我做了:

    import pickle  
    from world import World  
    w = pickle.load(open("file", "rb"))
    

    我使用的python2.6.5和ipython0.10都来自enthoughtpython发行版,但以前的版本也有问题。

    2 回复  |  直到 12 年前
        1
  •  12
  •   Alex Martelli    16 年前

    看来你改了 FakeModule 从你清理数据到你试图取消清理数据:具体来说,你已经从模块中删除了一些顶级对象,名为 World (也许是一个类,也许是一个函数)。

    Pickling“按名称”序列化类和函数,因此它们必须是模块顶层的名称 该模块不能被修改(至少不能以这样的方式严重影响这些名称——当然是这样) 不 通过

    一旦你准确地确定了你所做的哪些改变阻碍了取消勾选,如果因为其他原因你不能恢复这些改变,那么它经常会被黑客攻击。例如,如果你刚搬家 从 假模块 CoolModule ,执行:

    import FakeModule
    import CoolModule
    FakeModule.World = CoolModule.World
    

    就在取消pickle之前(记住用新的结构再次pickle,这样就不必每次取消pickle时都重复这些hack;-)。

    编辑 __name__ 等于 '__main__' ,这表明pickle在编写时将保存类的对象 __main__.World . 因为他用的是ASCII泡菜(a) 非常 性能和磁盘空间方面的错误选择),顺便说一下,检查一下:

    $ cat file
    (i__main__
    World
    p0
    (dp1
    

    __main__ . 现在,不用麻烦ipython,只需一个简单的Python交互式解释器:

    $ py26
    Python 2.6.5 (r265:79359, Mar 24 2010, 01:32:55) 
    [GCC 4.0.1 (Apple Inc. build 5493)] on darwin
    Type "help", "copyright", "credits" or "license" for more information.
    >>> import world
    >>> import pickle
    >>> pickle.load(open("file", "rb"))
    Traceback (most recent call last):
      File "<stdin>", line 1, in <module>
      File "/Library/Frameworks/Python.framework/Versions/2.6/lib/python2.6/pickle.py", line 1370, in load
        return Unpickler(file).load()
      File "/Library/Frameworks/Python.framework/Versions/2.6/lib/python2.6/pickle.py", line 858, in load
        dispatch[key](self)
      File "/Library/Frameworks/Python.framework/Versions/2.6/lib/python2.6/pickle.py", line 1069, in load_inst
        klass = self.find_class(module, name)
      File "/Library/Frameworks/Python.framework/Versions/2.6/lib/python2.6/pickle.py", line 1126, in find_class
        klass = getattr(mod, name)
    AttributeError: 'module' object has no attribute 'World'
    >>> 
    

    这个错误很容易重现,其原因也很明显:执行类名查找的模块(即, )确实没有名为“世界”的属性。模块 world

    >>> World = world.World
    >>> pickle.load(open("file", "rb"))
    <world.World instance at 0xf5300>
    >>> 
    

    当然,现在这个方法非常有效(正如我之前所说的)。也许OP没有看到这个问题,因为他用的是我讨厌的进口形式, from world import World (直接从模块中导入函数或类,而不是从模块本身)。

    不 制造模块 __主要__ 直接用于直接记录交互命令行中发生的事情,但是插入了一个(称为FakeModule,正如操作人员从错误消息中发现的;-)为了“酷”而使用黑魔法;c。不过,无论何时,只要您想直接访问具有给定名称的模块,在Python中都非常简单,当然:

    In [1]: import world
    
    In [2]: import pickle
    
    In [3]: import sys
    
    In [4]: sys.modules['__main__'].World = world.World
    
    In [5]: pickle.load(open("file", "rb"))
    Out[5]: <world.World instance at 0x118fc10>
    
    In [6]: 
    

    要记住的第一个教训:避免使用黑魔法,至少在你作为一个巫师的学徒足够好,能够发现并修复它偶尔逃跑的情况之前(否则,那些拿着桶的扫帚可能会在你打盹的时候淹没整个世界;-)。

    或者,另一种阅读方式:要正确使用某个抽象层(比如ipython放在Python之上的“酷”抽象层),您需要对底层(这里是Python本身及其核心机制,比如pickling和sys.modules)有深入的了解。

    第二课:pickle文件基本上是坏的,这是由于您编写它的方式,因为它只能在模块 __主要__ 有一个类名 Word ,当然,如果没有像上面那样的一些黑客,它通常不会有。pickle文件应该将类记录为living-in模块 世界 . 如果你真的感觉到了 必须 if __name__ == '__main__': 中的子句 world.py

    import pickle
    class World:
        ""
    if __name__ == '__main__':
        import world
        w = world.World()
        pickle.dump(w, open("file", "wb"))
    

    在灵活性和性能方面更快乐)。

        2
  •  2
  •   unutbu    16 年前

    当你泡菜的时候 w 在 __main__ pickle.dump(w, open("file", "wb")) ,事实上 来自 __主要__ 模块记录在 file :

    % xxd file
    0000000: 2869 5f5f 6d61 696e 5f5f 0a57 6f72 6c64  (i__main__.World
    0000010: 0a70 300a 2864 7031 0a62 2e              .p0.(dp1.b.
    

    文件 ,它执行以下行:

    /usr/lib/python2.6/pickle.pyc in find_class(self, module, name)
       1124         __import__(module)
       1125         mod = sys.modules[module]
    -> 1126         klass = getattr(mod, name)
       1127         return klass
       1128 
    

    特别是,它试图执行 __import__('__main__')

    In [29]: fake=__import__('__main__')
    
    In [32]: fake
    Out[32]: <module '__main__' from '/usr/lib/pymodules/python2.6/IPython/FakeModule.pyc'>
    

    这就是 FakeModule 我在AttributeError里提到的。

    如果你往里面看 fake.__dict__ 你会发现它不包括 World 即使你说 from test import World 在考试之前还是之后 __import__

    如果你跑了

    In [35]: fake.__dict__['World']=World
    

    那么 pickle.load 将工作:

    In [37]: w = pickle.load(open("file", "rb"))
    

    也许有更干净的方法;我不知道。你能想到什么 世界 在 fake 命名空间应该可以工作。

    注:2008年,伊皮顿的创造者费尔南多·佩雷斯, wrote a little bit 在这个问题上。他也许会用某种方法来解决这个问题,以避免我的恶意攻击。您可能想在IPython用户邮件列表中询问,或者更简单一点,就是不要在 命名空间。