-
ResourceManager中的Resource Estimator框架介绍与算法剖析
本文首先介绍了Hadoop中的ResourceManager中的estimator service的框架与运行流程，然后对其中用到的资源估算算法进行了原理剖析。
宋超 2023-01-03
284 0 0 -
基于腾讯云CVM搭建Hadoop集群及数据迁移最佳实践
本文主要介绍如何在腾讯云CVM上搭建Hadoop集群，以及如何通过distcp工具将友商云Hadoop中的数据迁移到腾讯云自建Hadoop集群。
281 0 0 -
基于OGG和Sqoop的TBDS接入方案系列-Sqoop与腾讯大数据套件TBDS的集成示例介绍
Oracle里存储的结构化数据导出到Hadoop体系做离线计算是一种常见数据处置手段，此案例介绍了一个利用Sqoop将数据从Oracle离线导入到腾讯大数据套件...
306 0 0 -
基于OGG和Sqoop的TBDS接入方案系列-总体方案
腾讯大数据处理套件（Tencent Big Data Suite，以下简称TBDS）是一套针对私有化场景提供的全功能型大数据处理平台。为客户提供按需部署大数据处...
294 0 0 -
腾讯专有云TBDS规划和自动化部署工具介绍
TBDS Autodeploy Tool是一款针对腾讯大数据套件（即TBDS）的规划和自动化部署工具，其基本功能包括：
292 0 0 -
Hadoop/Spark读写ES之性能调优
腾讯云EMR&Elasticsearch中使用ES-Hadoop之MR&Hive篇
302 0 0 -
微信支付万亿日志在Hermes中的实践
目前微信支付日志单日最大入库总量已达到万亿级，单日入库存储量达 PB 级，而在春节等重大节假日预计整个日入库规模会有进一步的增长。
277 0 0 -
图文：TBASE分布式数据库的自动全量备份配置（备份至HDFS分布式存储中）
TBase 是一款高扩展性、SQL 兼容度高（兼容绝大多数 PostgreSQL 语法以及大部分 Oracle 语法）、提供事务一致性功能支持、具备多级容灾能...
275 0 0 -
YARN资源调度策略
YARN 资源调度器是直接从MR基础上修改而来，它提供了三种可用资源调度器。
283 0 0 -
MapReduce推测机制及自定义推测机制
作者：wyattliu 腾讯TEG工程师 |导语 集群中的机器机型、负载并不一定完全相同，所以即使一个MapReduce任务每一个Map/Reduce ta...
274 0 0
搜索内容
包含标签：Hadoop 的文章
