hive 数据倾斜

什么是数据倾斜? 数据分布不均匀,造成数据大量的集中到一点,造成数据热点。 Hadoop 特性 不怕数据量大,怕数据倾斜 Job 数比较多的作业运行效率相对比较低,如

maven 学习

maven 是为 java 项目打造的管理和构建工具,主要功能有: 提供了一套标准化的项目结构 提供了一套标准化的构建流程(编译,测试,打包,发布。。) 提供了一套依

mysql 主从复制实践

mysql是常见的关系型数据库,为了方便把一个mysql数据源的数据复制到其他mysql host,复制特性就是为了解决这个问题的,slave

运维开发笔记

ssh免密登录localhost配置 生成 ssh keys ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa 将 ssh keys 输出到 authorized_keys中 cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys 切换权限 chmod 0600 ~/.ssh/authorized_keys base64 加密解密 加密 base64

力导向图

force-graph 力导向图属性总结 力导向图 基础容器 <div id="graph"></div> 基础节点数据 const gData = { "nodes": [ { "id": "mysql", "group": 1 }, { "id": "redis", "group": 1 }, { "id": "hive", "group": 2 }, { "id": "impala", "group": 2 }, { "id": "hdfs", "group": 3 }, { "id": "张三