《腾讯云TCHouse - D云上实时湖仓构建和进化》由李德在Doris Summit Asia 2024上分享,主要围绕腾讯云TCHouse - D展开,涵盖选✅型思考□□、产品介绍□□□□、后续规划及社区共✅建计划等内容。
1. 选型思考:云数据仓库面临复杂查询□□、混合负载下的性能,实时增量处理,高并发□□、高可用✅等诸多挑战。腾讯云基于大数据和混㊣合负载场景的极致性能需求,综合考量后选择Doris作为实时数仓。Doris具有开源开放□□、社区活跃□□□□、用户基✅数大□□□、性能优异□□□、功能丰富□□、生态兼容等优势,能满㊣足多维分析□□□□、高并发等多种场景需求。
2. 产品介绍:TCHouse - D定位为云原生□□□、全托管□□、一站式的实时数仓及湖仓统一引擎 。基于Apa㊣che Doris内核构建,与云上大㊣数据生㊣态体系融合,提供丰富集群管控能力和完善巡检告警体系。该产品具备简㊣单易用(开箱即用□□□□、标准S✅QL□□□、兼容MySQL✅协议)□□□、极简运维✅(水平扩展□□、数据重分布)□□□□、安全可靠(全托管□□□、SLA保障)□□□、生态兼容(联邦多种产品)等特性。同时,TCHouse - D还拥有完善的全托管服务和企业级特性,通过与DataInlo✅ng□□□、DLC等联动,实现高效数据同步□□□、湖仓一体服务,提升✅数据时效性,为客户提供优质的数据分析体验。
3. 后续规划:在产品后续发展上,TCHouse - D将从多个方向推进。在云上生态方面,实现数据集成Zero ETL 夹绳器选型,加强与Wedata集成;在弹性及Serv㊣erless领域,进行资源分㊣时□□、规则弹性,存储/计算资源按需计费;在AI融合层面,引入智能问答□□□□、智能巡检和智能调优等功能;此外,还将持续对3.0版本迭代优化,推动极速湖㊣仓演进。
4. 社区共建计划:腾讯云TCHouse - D团队积极参与社区共建。团队累计提交PR 1000 + ,2024年度截至11月底已提交400 + 。在社区贡献上,完成Ranger集成适配□□□□、开发支持Pamion等,支持数据脱敏曳引机十大品牌□□、冷数据备份恢复等功能。TCHouse - D内核与社区Apache Doris保持100%兼容,通过参与社区活动□□、需求反馈□□、文档✅共建及开发共建等方式,持续回馈社区,助力社区发展。