设为首页收藏本站

LUPA开源社区

 找回密码
 注册
文章 帖子 博客
LUPA开源社区 首页 业界资讯 软件追踪 查看内容

Linkis 0.9.4版本发布

2020-6-14 22:09| 发布者: joejoe0332| 查看: 314| 评论: 0|原作者: oschina|来自: oschina

摘要: 什么是Linkis? Linkis是微众银行自研的一个打通了多个计算存储引擎如:Spark、TiSpark、Hive、Python和HBase等,对外提供统一REST/WebSocket/JDBC接口,提交执行SQL、Pyspark、HiveQL、Scala等脚本的计算中间件。 Li ...

什么是Linkis?

Linkis是微众银行自研的一个打通了多个计算存储引擎如:Spark、TiSpark、Hive、Python和HBase等,对外提供统一REST/WebSocket/JDBC接口,提交执行SQL、Pyspark、HiveQL、Scala等脚本的计算中间件。

Linkis的开源项目地址:

gitee地址: https://gitee.com/WeBank/Linkis

Github地址:https://github.com/WeBankFinTech/Linkis

Linkis 0.9.4发布,新增统一上下文服务模块以及基于统一上下文服务模块对其他Linkis模块如执行服务、gateway、存储服务等进行改造;新增统一数据源服务模块,为上层接入Linkis的应用提供统一的数据源服务,现在已经有社区伙伴开始基于Linkis统一数据源进行服务开发;对Linkis公共包的依赖以及启动脚本进行了优化,同时修复了若干社区用户提出的bug

特性增强

  • [Linkis-371] 添加上下文服务的客户端模块。

  • [Linkis-372] 支持上下文服务的搜索功能。

  • [Linkis-376] 添加上下文的服务端模块。

  • [Linkis-375] 支持上下文服务的持久化。

  • [Linkis-368] 添加上下文服务的缓存机制和数据结构模块。

  • [Linkis-428] Linkis执行模块基于上下文服务进行改造。

  • [Linkis-432] 添加上下文服务公共模块。

  • [Linkis-434] Linkis-gateway模块基于上下文服务进行改造,支持上下文服务器的HA。

  • [Linkis-388] http依赖模块的优化,去除dispatch依赖,并优化Linkis底层包的依赖。

  • [Linkis-395] 将ListenerBus的queue默认改为ArrayBlockingQueue的实现。

  • [Linkis-297] 添加数据源管理的公共模块。

  • [Linkis-298] 添加mysql数据库元数据管理模块。

  • [Linkis-299] 添加元数据管理服务端模块。

  • [Linkis-300] 添加Hive元数据服务模块。

  • [Linkis-301] 添加ElasticSearch元数据服务模块。

  • [Linkis-302] 添加元数据管理公共模块。

  • [Linkis-303] 添加元数据管理服务端模块。

Bug修复

  • [Linkis-406] 修改数据源模块的目录结构,优化编译。

  • [Linkis-407] 修复向导性建表中ds字段重复的bug。

  • [Linkis-383] 修改Linkis ujes client的测试类适配Linkis的更新。

  • [Linkis-438] Linkis0.9.4编译问题修复。

贡献者

Linkis0.9.4的发布,离不开WeDataSphere社区的贡献者,他们无私地贡献自己的代码,积极地与社区伙伴进行技术交流,有了他们的助力,Linkis0.9.4才能顺利地发布,在此感谢各位社区的贡献者! 排名不分先后:

liangqilang:贡献了httpclient替换dispatch的代码

Davidhua1996: 贡献了数据源管理和元数据管理的基础模块和功能实现.

zhengfan199525:添加了hive的元数据管理模块.

alexzyWu: 贡献了元数据管理的服务端模块.

jaminlu:优化了元数据管理的目录结构和编译.

bleachzk: 贡献了数据源管理的公共模块.

liaoyt:添加元数据管理的rest接口.

SelfImpr001: 贡献了数据源管理的部分内容.

 

Linkis的开源项目地址:

gitee地址: https://gitee.com/WeBank/Linkis

Github地址:https://github.com/WeBankFinTech/Linkis


酷毙

雷人

鲜花

鸡蛋

漂亮
  • 快毕业了,没工作经验,
    找份工作好难啊?
    赶紧去人才芯片公司磨练吧!!

最新评论

关于LUPA|人才芯片工程|人才招聘|LUPA认证|LUPA教育|LUPA开源社区 ( 浙B2-20090187 浙公网安备 33010602006705号   

返回顶部