算力规模突破千万核,腾讯云大数据产品全景图长啥样?| Q推荐

2022 年 8 月 22 日 InfoQ

腾讯云大数据技术已经从第一代的离线计算,第二代的实时计算,第三代的机器学习,发展到如今以隐私计算、数智融合以及云原生为代表的第四代。

腾讯云今天在首届大数据峰会上公布,其大数据平台算力规模已经突破千万,日实时计算量达百万亿级、日运行容器数超亿级,日计算数据量数百 PB,服务的企业客户数超 2 万家,开源社区代码贡献量超 800 万行,进一步呈现了自身在大数据领域的顶级实力。

腾讯云副总裁黄世飞表示,基于全新的技术架构、数据治理理念以及产品能力,从底层的大数据基础引擎、中层的一站式大数据开发治理平台, 再到上层的智能推荐、隐私计算和 BI 应用,腾讯云已经构筑了国内领先的大数据产品矩阵。

腾讯云大数据产品矩阵

1 深化云原生能力,大数据基础产品开箱即用

大数据与云原生技术的结合成为解决目前大数据技术门槛高、运维部署难度大等问题的最优解,企业在利用大数据过程中真正需要的是一套开箱即用的云原生产品服务。腾讯云大数据基于开源开放理念,以及内部单集群超万节点的大规模技术实践,沉淀了国内领先的企业级云原生大数据技术架构的构建能力。

弹性 MapReduce (EMR)、Elasticsearch Service (ES)、云数据仓库 CDW、数据湖计算 DLC、流计算 Oceanus、数据集成 DateInLong 等构成了腾讯云大数据基础产品的核心引擎。以 EMR 来说,基于云原生技术的安全、低成本、高可靠开源大数据计算框架,帮助客户构建可弹性扩展的企业级大数据技术架构,轻松应对 PB 级海量数据的价值挖掘挑战。数据湖计算 DLC 基于存算分离的产品架构,可以实现数据资产统一建设,帮助用户敏捷、低成本地管理和分析海量数据。

2 基于全新治理理念,WeData 全面升级

全新升级的一站式大数据开发治理平台 WeData,基于业内独创的 DataOps 数据开发模式, 通过协同、效率、一体三大核心优势, 实现了数据集成、数据资产、数据开发、数据服务等全方位的数据治理能力。凭借其基于开源、简单易用、安全稳定、降本增效的优势,腾讯云 WeData 能帮助企业大幅提升数据管理效率和数据质量, 为业务创造价值, 目前已经在企业级数据仓库构建、数据资产治理等场景中被广泛应用。

3 大数据和 AI 融合,实现数据与业务闭环

大数据和 AI 技术的融合不仅让大数据的运维、部署更加智能,还可以打通数据和业务智能化之间的阻隔,实现价值闭环。腾讯云大数据正在加速推进和自主研发的人工智能平台 Ti-One 的紧密结合,让经过腾讯内部海量业务训练过的智能化真能融入大数据业务中。新一代智能推荐平台采用业界领先的 AI 技术和推荐算法,能够为信息流分类页推荐、短视频个性化推荐、信息流猜你喜欢等场景提供强大技术支撑。

为打破数据孤岛实现数据协同,全自研 Angel PowerFL 隐私计算框架和首创的基于 Spark + MQ 的隐私计算模式,为政务、金融、广告营销等众多行业提供了数据安全保障。凭借该技术,腾讯云大数据团队连续两年获得 iDash 世界隐私计算大赛冠军,安全性能领冠全球。

同时,腾讯云大数据 BI 产品,支持腾讯云上各类数据源、数据处理平台快速接入,拖拽式敏捷分析方式,让非技术人员可快速构建报表满足复杂业务分析需求。

值得一提的是,这些公有云上的大数据基础引擎、数据开发治理平台、智能推荐、隐私计算、BI 等能力,也可以通过腾讯云大数据处理套件 TBDS 在私有云或非云化环境等比例获取。

腾讯云副总裁刘煜宏表示:“未来,腾讯云大数据还将在自适应计算架构、流批一体的实时湖仓、大数据‘自动驾驶平台’、云原生大数据等方向上进一步发力,携手合作伙伴,为客户提供更智能、更安全的大数据产品服务。在更加基础底层的编译器领域,我们将深入打造自主可控的数据科学编译器引擎,为上层的大数据产品发展提供强大的技术保障。”

本次峰会上,腾讯云大数据还首次对外宣布“智理无数,心中有数”的品牌理念。同时,为推动云原生大数据技术发展,共建云原生大数据生态,腾讯云联合英伟达、Elastic、StarRocks、Apache Alluxio、SelectDB 等多家软硬件技术厂商与开源社区,共同发起成立云原生大数据技术生态联盟。

登录查看更多
0

相关内容

从各种各样类型的数据中,快速获得有价值信息的能力,就是大数据技术。明白这一点至关重要,也正是这一点促使该技术具备走向众多企业的潜力。大数据的4个“V”,或者说特点有四个层面:第一,数据体量巨大。从TB级别,跃升到PB级别;第二,数据类型繁多。前文提到的网络日志、视频、图片、地理位置信息等等。第三,价值密度低。以视频为例,连续不间断监控过程中,可能有用的数据仅仅有一两秒。第四,处理速度快。
中国数据中台行业研究报告
专知会员服务
59+阅读 · 2022年11月19日
数据库行业发展报告
专知会员服务
37+阅读 · 2022年10月19日
《深度学习平台发展报告(2022年)》发布, 26页pdf
专知会员服务
118+阅读 · 2022年7月29日
阿里云发布《中国云原生数据湖应用洞察白皮书》
专知会员服务
42+阅读 · 2022年4月15日
《数据中台交付标准化》白皮书
专知会员服务
121+阅读 · 2022年3月21日
腾讯:2022年十大数字科技应用趋势
专知会员服务
80+阅读 · 2022年1月13日
2021年中国云原生AI开发平台白皮书
专知会员服务
54+阅读 · 2021年12月4日
人工智能AI中台白皮书(2021年),45页pdf
专知会员服务
284+阅读 · 2021年9月18日
中间件+云原生= ?| DIVE
InfoQ
0+阅读 · 2022年3月10日
从阿里核心场景看实时数仓的发展趋势
阿里技术
0+阅读 · 2022年1月11日
国家自然科学基金
9+阅读 · 2015年12月31日
国家自然科学基金
5+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
8+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
Arxiv
0+阅读 · 2022年11月27日
Arxiv
0+阅读 · 2022年11月24日
VIP会员
相关VIP内容
中国数据中台行业研究报告
专知会员服务
59+阅读 · 2022年11月19日
数据库行业发展报告
专知会员服务
37+阅读 · 2022年10月19日
《深度学习平台发展报告(2022年)》发布, 26页pdf
专知会员服务
118+阅读 · 2022年7月29日
阿里云发布《中国云原生数据湖应用洞察白皮书》
专知会员服务
42+阅读 · 2022年4月15日
《数据中台交付标准化》白皮书
专知会员服务
121+阅读 · 2022年3月21日
腾讯:2022年十大数字科技应用趋势
专知会员服务
80+阅读 · 2022年1月13日
2021年中国云原生AI开发平台白皮书
专知会员服务
54+阅读 · 2021年12月4日
人工智能AI中台白皮书(2021年),45页pdf
专知会员服务
284+阅读 · 2021年9月18日
相关基金
国家自然科学基金
9+阅读 · 2015年12月31日
国家自然科学基金
5+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
8+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
Top
微信扫码咨询专知VIP会员