软件截图
Linkis(微服务架构) v0.11.0官方版更新说明:
- 修复了已知问题
Linkis是一个基于微服务架构的大数据作业/请求全生命周期管理平台。它打通了多个计算存储引擎,如Spark、TiSpark、Hive、Python和HBase等,提供了金融级多租户隔离、资源管控、权限隔离等企业级特性。Linkis支持统一变量、UDF、函数、用户资源文件管理,具备高并发、高性能、高可用的能力。
Linkis的主要功能包括统一作业执行服务,资源管理服务,应用管理服务,统一存储服务,统一上下文服务,物料库和元数据服务。用户可以通过Linkis管理台查看和管理自己的作业和引擎,配置引擎的启动参数,设置变量,并查看Yarn资源使用情况和用户资源使用排名。
此外,Linkis还支持标签功能,用户可以给EngineManager和引擎打标签,方便管理和访问目标引擎。另外,Linkis还提供了AppGovernance应用治理功能,实现系统级和用户级应用全生命周期管理,包括离线批量、交互式查询和实时流式应用,为应用提供复用和智能切换能力,以及智能限流和保护功能。
最新版本的Linkis还支持Flink和SparkStructuredStreaming,以满足更多的大数据处理需求。Linkis的微服务架构使得它具备高度的灵活性和扩展性,能够有效管理大规模数据作业和请求,提升数据处理效率和质量。