PythonTip >> 博文 >> 开源软件

Hadoop的Jython封装 Happy

zihua 2013-09-24 22:09:21 点击: 910 | 收藏


Hadoop + Python = Happy

Happy 为Jython开发者使用Hadoop框架提供了便利,Happy框架封装了Hadoop的复杂调用过程,让Map-Reduce开发变得更为容易。Happy中的Map-Reduce作业过程在子类happy.HappyJob中定义,当用户创建类实例后,设置作业任务的输入输出参数,然后调用run()方法即可启动分治规约处理,此时,Happy框架将序列化用户的作业实例,并将任务及相应依赖库拷贝到Hadoop集群执行。目前,Happy框架已被数据集成站点freebase.com采纳,用于进行站点的数据挖掘与分析工作。

原文链接:http://www.oschina.net/p/happy

作者:zihua | 分类: 开源软件 | 标签: python开源 | 阅读: 910 | 发布于: 2013-09-24 22时 |