用于数据分析应用程序的高性能运行时 Weld-Project

BSD-3.0
Linux
2017-12-22
局长

Weld 使用 Rust 语言编写,可以使用 LLVM 编译器框架,为整个数据分析工作流生成高效的并行运行的代码。CSAIL 曾开发出了几个将速度推向极限的大数据加速项目,比如 Milk 和 Tapir。

这个小组声称 Weld 是一种面向数据分析的通用运行时环境,它拿来现代数据处理堆栈几个分离的部分后,可以步调一致地优化它们。每一个部分快速运行,但是“跨不同功能的数据移动可能占了执行时间的大部分。”

换句话说,管道花在将数据在各部分之间来回移动上的时间超过了花在实际处理数据上的时间。Weld 创建了一种每个库都可以接入的运行时环境,提供了一种通用方法,可以跨管道运行需要并行化和优化的关键数据。

诸多框架本身并不为运行时环境生成代码。相反,它们通过 API 来调用 Weld,该 API 描述了处理哪种类型的工作。然后,Weld 使用 LLVM 生成可自动包括优化机制(比如多线程处理)或面向高速向量运算的英特尔 AV2 处理器扩展的代码。

当前的性能指标

部分内容摘自云头条

加载中

暂无资讯

暂无问答

Weld(CDI)教程

本文作者:Tony Lee (http://blog.niinoo.com)首发地址:http://my.oschina.net/niinoo/blog/38310 转载请与作者联系。 -- 简介 CDI - Context Dependency Injection 上下文依赖注入:Jav...

2012/01/01 16:59
1K
0
CDI(Weld)基础<4>Scopes and contexts

@RequestScoped , @SessionScoped , @ApplicationScoped, @ConversationScoped ,singleton pseudo-scope,dependent pseudo-scope,@New qualifier...

2014/05/06 11:40
210
0
CDI(Weld)高级<6> Specialization and alternatives

Specialization, inheritance and alternatives,1. Using alternative stereotypes2. A minor problem with alternatives3. Using specialization...

2014/05/18 00:04
155
0
CDI(Weld)高级<4> Event(事件)

Cdi中的event事件,是整个CDI的精华所在.也是与所有JavaEE 整合的关键所在.类似与观察者模式,极大的解耦.

2014/05/15 14:33
1K
0
CDI(Weld)基础<2> JSF+CDI+JPA项目示例

本章是个简单的项目示例。JSF+CDI+JPA like springmvc+spring+spring jdbc。示例一个登录。

2014/04/26 12:47
271
1
CDI(Weld)高级<2> Interceptors(拦截器)

CDI高级部分:拦截器的使用.

2014/05/12 23:54
1K
1
CDI(Weld)高级<3> Decorators(装饰器)

CDI(Weld)高级部分<3> Decorators(装饰器)的运用

2014/05/14 10:41
460
0

没有更多内容

加载失败,请刷新页面

返回顶部
顶部