python 创建egg

4 篇文章 0 订阅
2 篇文章 0 订阅

最近需要使用spark 运算数据,我是个Pythoner,自然用的是pyspark啦!


其中遇到一个问题,就是自己写的一些package,在spark中的map,reduce中并不能引用这个包里的函数。查文档说是要把python 的package打包成egg,再提交上去才能正确引入。


上网查询了下python 打包,现在都是用setuptools,直接在package下穿件一个setup.py,

以下是代码:

from setuptools import setup

setup(
    name='project',
    version='1.0',
    description='test',
    packages=[
        'utils'
    ],
    py_modules=[
        'settings'
    ]
)

如果是个文件包,就指定再packages下,是个.py结尾的是指定再py_modules,就这么简单地设定。

然后Python setup.py bdist_egg就会创建一个egg出来了。

根据setuptools文档,python还可以根据c,c++语言,指定库,很容易生成用c底层的python包,这功能以后还有待研究。还可以根据不同平台,创建不一样的rpm,deb包。看起来打包真的十分容易。



参考网址:

http://stackoverflow.com/questions/2026395/how-to-create-python-egg-file

http://mrtopf.de/blog/en/a-small-introduction-to-python-eggs/

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值