腾讯大数据处理套件TBDS

腾讯大数据处理套件（Tencent Big Data Suite，TBDS）是基于腾讯多年海量数据处理经验，对外提供的可靠、安全、易用的大数据处理平台。您可以借助 TBDS 在公有云、私有云、非云化环境，根据不同数据处理需求选择合适的大数据分析引擎和相应的实时数据开发、离线数据开发以及算法开发服务，来构建您的数据仓库、用户画像、推荐、风险管控等大数据应用服务。    

腾讯大数据处理套件（Tencent Big Data Suite，TBDS）是一个可靠、安全、易用的大数据处理平台。TBDS 提供了多种分析引擎方便您应对实时流数据处理、离线批数据分析、实时多维分析等场景的海量数据分析挑战。此外，还提供了全链路的数据开发以及数据治理服务帮助提升大数据开发效率。面对数据仓库、用户画像、推荐、风险管控等应用场景挑战，TBDS 与各行业合作伙可以为您提供一体化大数据应用解决方案。    

功能

腾讯大数据套件 TBDS 是可靠、安全、易用的一站式大数据处理平台，能够用于构建数据仓库、用户画像、推荐等大数据应用。

全链路数据开发

易用、安全、稳定、的全链路大数据开发引擎。提供拖拽式的可视化数据开发 IDE，为用户的大数据集成、存储、计算环节提供完整而稳定的企业级解决方案。用户能借助于大数据套件获取到强大的大数据开发能力，聚焦于进行企业的业务创新。

多渠道数据集成

• 支持 Tube、Kafka 的数据实时接入。

• 支持 Mysql、Postgre、Oracle 等主流关系数据库导入，支持文本类日志数据离线导入。

• 支持高强度数据压缩及加密传输，历经每天峰值1.46P、5万亿条数据接入考验。

企业级大数据存储解决方案

• 支持块存储、分布式文件、对象存储、SQL、NoSQL 从 GB 到 PB 量级的存储解决方案，满足企业客户复杂存储应用场景。

• 存储系统高可靠容灾设计,可靠性可达99.996%，用户按需选择数据热备数量，支持冷热数据分治，支持数据冷备策略自定义。

• 高可扩展设计，存储系统可动态随企业数据量增加从 G 到 P 级的动态扩容，支持系统不停机动态扩容。集群数据平衡成本小化。

离线批处理计算

• 支持 MapReduce、Hive 等批处理计算作业。

• 支持 Spark 分布式内存计算框架，以支持复杂的数据挖掘算法和图计算算法。

• 支持丰富的作业调度策略，包含分钟、小时、天、月级周期或非周期的任务执行策略。

实时流处理计算

• 支持 TStorm（腾讯对社区 Storm 流处理引擎重写的 java 版本）、Storm 流式任务作业引擎，覆盖实时要求的流式作业场景。

• 支持基于 Spark 上的 Spark Streaming，满足毫秒级的实时计算场景需求，如实时推荐、用户行为分析等。

可视化工作流开发 IDE

拖拽式的工作流开发 IDE，简单 Web 式拖拽操作来完成整个大数据工作流的任务开发。内置丰富的处理器，囊括离线数据导入导出、在线实时数据接入、Java 程序、Shell 脚本、机器学习等多种任务的配置集成。

文本检索及检索分析

迁级纬度、千亿数据规模下向用户提供毫秒级检索分析服务，满足用户的检索分析场景需求。

产品优势

技术开放

存储标准兼容开源 Hadoop 标准，使历史构建在 Hadoop 上的大数据平台可以平滑迁移。支持多驱动接入、兼容社区标准；支持 SQL2003 标准的内存迭代运算引擎 SparkSQL；可选购 PLSQL 语法驱动，以获得90%的 Oracle 语法支持。

安全可靠

数据节点分布式部署，可选多份备份。所有系统控制节点主从热备，故障秒级切换，经过腾讯95%业务考验，可用性达99.999%。支持数据加密传输、存储。全平台单点登录，统一策略管控中心。基于角色的数据管控体系，支持列级粒度权限控制。完善的访问审计及预警模型。

性能

数据接入引擎，内部业务日接入五万亿条数据。性能全面社区方案，数据处理能力提升30%左右。支持上千维度、千亿规模数据的秒级交互式多维分析。

简单易用

支持一键式部署，只需选择您适合的服务即可快速完成部署。支持数据接入、处理、存储、分析、机器学习的拖拽式全链路大数据开发，开箱即用的数据治理工具集，数据只需专注于业务开发。

场景丰富

在金融、政务、公安、零售、传统企业等领域积累了丰富的业务应用案例，特别是在 PB 级离线、近线、实时数仓企业级用户画像，金融实时风控，推荐，物联网大数据等场景我们都有成熟的解决方案。

生态完善

深度与各行业的大数据开发、数据治理服务及应用商合作，为政务、金融、公安等行业客户提供基础软件平台 + 应用 + 服务在内的一体化大数据解决方案。

应用场景

腾讯大数据处理套件 TBDS 适用于企业从 GB 到 TB、PB 级的大数据处理场景，包括但不限于以下场景：

数据仓库建设

• 大数据处理套件完整覆盖数据抽取、转换、加载、建模、分析、报表呈现、数据治理等数仓建设环节，用户可借助 TBDS 大数据套件在公有云、私有云、非云化环境快速建设 TB 到 PB 级的企业数据仓库和数据集市，搭建专属的大数据应用。

• 通过大数据处理套件，用户可显著降低基于企业数据仓库的数据应用开发周期，降低开发成本，还可大大降低数据仓库、数据处理、数据应用的运维成本。

实时流式数据处理

• 用户可基于腾讯大数据套件快速开发本行业在实时流式场景下的大数据处理、分析的应用程序，以实现对企业实时业务的风险监控与告警，以占据大数据时代的优势地位。

• 流式数据处理可用于金融行业的风险管控、物联网的海量传感器数据处理、工业生产线的实时故障预警、病人特征数据实时分析、实时交通流量分析、互联网实时流量分析等应用场景。

离线数据处理

• 腾讯大数据套件基于 Hadoop 体系的 MapReduce、Hive、Pig、Spark 技术向企业用户提供的强大的数据离线批处理能力，用户可以便捷的使用腾讯大数据套件对企业数据进行抽取、转换、加载等离线数据处理加工。

• 通过离线数据处理引擎，用户可迅速的对企业所积累的数据进行 ETL 处理，快速发掘海量历史数据的商业价值和社会价值。

数据分析与探索挖掘

• 通过腾讯大数据处理套件所提供的强大数据分析与探索挖掘能力，用户可快速对企业在 PB 级规模下的大数据进行可视化的数据分析探索，在纷繁复杂的商业数据中快速获取数据洞察力，商业先机。

• 用户还可通过腾讯大数据处理套件所提供的强大机器学习能力对企业数据进行深度挖掘，进一步发掘海量数据中蕴藏的无限价值。

一般常见问题

腾讯大数据处理套件支持什么部署方式？

TBDS 可部署在腾讯云或 IDC 环境部署。

腾讯大数据处理套件根据什么收费？

TBDS 费用主要由许可授权费和服务支持费构成，另外还提供驻场服务、数据建模等增值服务，根据具体需求收费。

腾讯大数据处理套件部署的操作系统要求是什么？

TBDS 部署的操作系统可选 Centos 7.x，建议7.3，小化安装即可