
课程咨询: 400-996-5531 / 投诉建议: 400-111-8989
认真做教育 专心促就业
Bigflow是百度开源的高性能Python分布式计算框架Bigflow,致力于提供一套简单易用的接口来描述用户的计算任务,并使同一套代码可以运行在不同的执行引擎之上。Bigflow在百度公司内部对接了公司内部的批量计算引擎DCE,迭代引擎Spark,以及公司内部的流式计算引擎Gemini。开源版本仅开放了Bigflow on Spark。
特色
高性能: Bigflow的接口设计使得Bigflow可以感知更多的用户需求的细节属性,并且Bigflow会根据计算的属性进行作业的优化;另其执行层使用C++实现,用户的一些代码逻辑会被翻译为C++执行,有较大的性能提升。
简单易用:支持嵌套的分布式数据集,使得其接口更加易于理解,并且拥有更强的代码可复用性。在许多需要优化的场景中,因为Bigflow的可以进行自动的性能以及内存占用优化,所以用户可以避免许多因OOM或性能不足而必须进行的优化工作,降低用户的使用成本。
IT开发作为2018有前景的行业,很多人都在毕业之后先选择了这个行业。世界互联网大会给了人们巨大的希望,面对这个万人过独木桥的情景,我们更应该尽早的武装好自己。达内时代科技集团致力于培养几大方向中软件人才课程与少儿教育课程。合肥IT培训助你一臂之力,更多免费训练营让你从零起步。
【免责声明】本文系本网编辑部分转载,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责。如涉及作品内容、版权和其它问题,请在30日内与管理员联系,我们会予以更改或删除相关文章,以保证您的权益!