当前位置: 首页 > news >正文

上新啦!腾讯云云原生数据湖产品DLC 2.2.5版本发布,来看特性详解!

e44a9ff941b641718579865a14e0bb6f.gif

为了满足企业大数据对联邦查询、高性能交互式查询、成本优化的需求,DLC团队正式发布数据湖计算DLC2.2.5版本!该版本推出联邦查询增强、网络配置模块、日志信息、原生函数等重磅特性~全方位提升产品能力,助力企业数据资产分析与管理!


重点特性

重点特性一:联邦查询分析增强,支持更多数据源

联邦查询新增Postgresql, SQLServer, ClickHouse三种数据源支持,支持数据源连通性测试。联邦查询分析覆盖更多用户使用场景,提高用户使用便捷性。

       17c2df4f62c395e3ce0c0bf2e8adac8a.png      

重点特性二:新增网络配置管理模块,规范数据引擎网络访问

新增网络配置管理模块,支持对数据引擎进行VPC网络配置关联及管理,规范化管理数据引擎网络及访问。

通过网络配置管理,用户可以灵活管理配置数据引擎的网络关系,满足数据查询网络管理的同时提供多种网络关系进行选择。

dabada0c8d8a0b977d51734a54ce6395.png

f93817a501d38c2a0cfcf1db7c1bba69.png

重点特性三:引擎查询分析性能再提升

Presto独享引擎支持通过引擎高级设置开启Fragment cache能力,计算性能进一步提升。

用户可选择开通使用Fragment cache能力,在交互式查询分析时获得更快的查询速度及更稳定优秀的性能,进一步优化资源用量。


重点特性四:支持分钟级数据引擎自动挂起规则,成本空间进一步优化

新增数据引擎自动挂起触发时间周期配置能力(分钟级),帮助用户精细化管理数据引擎挂起规则,进一步优化成本结构。

用户可以在引擎启停策略中,配置自动挂起时间到分钟级,当引擎闲置时间到达后,引擎将自动挂起,减少资源消耗。   

3e744a4601ef173fefcac6b1863399db.png

版本功能特性总览

联邦查询分析支持更多数据源,提供更友好的关联交互

  • 新增 Postgresql, SQLServer, ClickHouse三种数据源支持,帮助用户更便捷实现联邦查询分析;

  • 创建数据源连接新增连通性测试能力;

  • 扩大数据源支持范围,为用户在业务生产中提供更广的场景支持及数据源选择;

提升查询脚本分类管理能力

  • 查询脚本保存支持选择文件夹;

  • 支持对已保存的查询脚本进行文件夹的变更;

  • 帮助用户更好管理查询脚本,更便捷进行分类、查找、汇总;

Spark内核支持与EMR的联邦查询分析

  • 支持通过SQL对EMR与DLC原生表进行联邦查询分析;

  • 支持通过Spark作业对EMR与DLC的联邦查询分析及数据处理能力;

  • 帮助Spark内核用户进行更加灵活的多源联邦查询分析,扩大业务支持场景;

丰富Spark作业日志信息,提高日志查询效率

  • 新增Executor日志查询能力;

  • 支持对日志按时间升降序排列,帮助用户更方便查询跟进任务情况;

  • 帮助用户通过日志更快定位问题,全程了解Spark作业执行情况;

新增数据引擎网络配置管理,统一管理网络访问能力

  • 新增对数据引擎网络关系配置管理,解决数据源联邦查询网络关联打通和管理问题,帮助用户更加方便的管理数据引擎网络及数据源访问;

  • 支持通过数据源的网络配置信息或VPC信息配置数据引擎网络;

  • 支持对配置的网络进行修改、删除操作;

分钟级管理数据引擎自动挂起规则,进一步优化成本

  • 新增数据引擎自动挂起触发时间周期配置能力,最小支持1分钟;

  • 帮助用户更精细化管理数据引擎挂起规则,进一步优化成本结构;

Presto内核数据引擎CBO能力开启,提升查询性能

  • Presto内核数据引擎默认开启CBO能力,支持根据统计信息调整 JOIN 表的顺序;

  • 支持用户进行更复杂的数据查询诉求;

Presto原生函数支持,扩展语法支持范围

  • 支持使用Presto原生函数;

  • Presto支持OFFSET能力;

  • 支持UPDATE SET WHERE语法;

  • 支持通过Hint参数 type_coercion 开启/关闭隐式转化能力,ture 为开启,false 为关闭。默认为 ture ;

  • 语法支持grouping及with cube用法;

  • 更多语法及查询优化,进一步扩大用户使用场景,帮助业务生产环境进行复杂业务查询;

推荐阅读

4440de395083aaffe8ec66254507baba.jpeg

d099d01dc0deec3987463f3aadf933f7.jpeg

8ee690aef1f83cabac7b58ec4491af71.jpeg

关注腾讯云大数据公众号

邀您探索数据的无限可能

304893ed7127dbe4bcca76783011069f.png

点击“阅读原文”,了解相关产品最新动态

↓↓↓

相关文章:

  • 【观察】赋能中小企业驶入成长“快车道”,华为云云商店背后的三重新价值...
  • TVM 学习指南(个人版)
  • pringboot+高考志愿填报信息管理系统 毕业设计-附源码251922S
  • python基于django的花卉种植技术交流系统
  • FastFlow(3)---有序FARM
  • Springboot餐饮点餐系统毕业设计源码301749
  • 借身份证给别人办理流量卡有风险吗?这些情况你必须要知道!
  • 概述LCR测试仪IM3536日本HIOKI日置IM3535 阻抗分析仪
  • qiankun微应用加载第三方js、sdk跨域报错
  • Linux网络编程-网络层IP协议
  • 神经网络图像识别代码,编码解码神经网络
  • 5分钟从掌握到精通---进制转化
  • centos安装zabbix
  • 前缀和以及哈希表优化
  • 【JavaSE】多线程篇(一)线程的相关概念与线程的基本使用
  • 2017 年终总结 —— 在路上
  • ESLint简单操作
  • java概述
  • java架构面试锦集:开源框架+并发+数据结构+大企必备面试题
  • js操作时间(持续更新)
  • js继承的实现方法
  • JS专题之继承
  • Node项目之评分系统(二)- 数据库设计
  • React 快速上手 - 06 容器组件、展示组件、操作组件
  • Redux 中间件分析
  • SSH 免密登录
  • ⭐ Unity 开发bug —— 打包后shader失效或者bug (我这里用Shader做两张图片的合并发现了问题)
  • vue:响应原理
  • 分享几个不错的工具
  • 服务器从安装到部署全过程(二)
  • 简单实现一个textarea自适应高度
  • 将 Measurements 和 Units 应用到物理学
  • 前端
  • Linux权限管理(week1_day5)--技术流ken
  • 教程:使用iPhone相机和openCV来完成3D重建(第一部分) ...
  • ​LeetCode解法汇总2696. 删除子串后的字符串最小长度
  • #Spring-boot高级
  • #我与Java虚拟机的故事#连载15:完整阅读的第一本技术书籍
  • ( 用例图)定义了系统的功能需求,它是从系统的外部看系统功能,并不描述系统内部对功能的具体实现
  • (39)STM32——FLASH闪存
  • (AngularJS)Angular 控制器之间通信初探
  • (AtCoder Beginner Contest 340) -- F - S = 1 -- 题解
  • (python)数据结构---字典
  • (webRTC、RecordRTC):navigator.mediaDevices undefined
  • (分布式缓存)Redis分片集群
  • (入门自用)--C++--抽象类--多态原理--虚表--1020
  • (转)eclipse内存溢出设置 -Xms212m -Xmx804m -XX:PermSize=250M -XX:MaxPermSize=356m
  • .Net FrameWork总结
  • .NET 指南:抽象化实现的基类
  • .NET/C# 利用 Walterlv.WeakEvents 高性能地定义和使用弱事件
  • .Net+SQL Server企业应用性能优化笔记4——精确查找瓶颈
  • .NET命名规范和开发约定
  • .NET应用架构设计:原则、模式与实践 目录预览
  • .ui文件相关
  • [ JavaScript ] JSON方法