记录线上Hadoop集群两个namenode都是standby状态 Hadoop集群产生异常的原因 线上集群扩容，集群要停机重启。发现两个namenode都为standby状态，这种问题存在的原因大部分都是因为Zookeeper的zkfc进程未启动成功，当然即使你启动了Zookepper进程也是没用的，因为此时只要ZKFC进程未启动的话，那么，HDFS就没办法与Zookeeper之间建立沟通的桥梁。ZKFC是ZooKeeper中用于自动故障转移的组件，也监视和管理 2020-06-08 Hadoop Hadoop namenode 集群
使用Sqoop导MySQL数据到Hbase报错 报错日志1234520/04/14 16:40:45 WARN mapreduce.HBaseImportJob: Could not find HBase table hbase_company20/04/14 16:40:45 WARN mapreduce.HBaseImportJob: This job may fail. Either explicitly create the table 2020-04-15 Sqoop 解决问题
实现SQL递归累加 实现SQL递归累加123456789# 原始数据2019-01-01 202019-01-02 152019-01-03 10# 递归累计的数据2019-01-01 202019-01-02 352019-01-03 45 ##表结构与数据 12345# 建表语句CREATE TABLE student_scores(date_time date, num int);# 插入数据ins 2020-04-01 MySQL MySQL 递归
Docker安装MySQL以及解决Navicat连接MySQL报错 MacOS Docker 安装使用Homebrew安装1brew cask install docker 手动下载安装 如果需要手动下载，请点击以下链接下载 Stable 或 Edge 版本的 Docker for Mac。 如同 macOS 其它软件一样，安装也非常简单，双击下载的 .dmg 文件，然后将鲸鱼图标拖拽到 Application 文件夹即可。 查看Docker版本12➜ ~ 2019-11-25 MySQL troubleshooting docker navicat
ClickHouse之深圳MeetUp 前言目前公司调研OLAT开源框架，最近ClickHouse火热，看了ClickHouse开源社区的Meetup，于是参加了宣讲，感触蛮多，同时俄罗斯Yandex团队小哥们都很帅、 纪要时间：10月20日下午2:00 -6:30地点：深圳湾软件产业基地4栋B座裙楼UTCP创意加速议题 2:00pm-3:00pm 《Roadmap and overview of ClickHouse》 Alek 2019-10-25 ClickHouse meetup
tez参数优化 Tez引擎跑HQL时候一直报错123456789101112131415-------------------------------------------------------------------------------- VERTICES STATUS TOTAL COMPLETED RUNNING PENDING FAILED KILLED---- 2019-07-08 Tez 调优
数据结构与算法之(一)：稀疏数组和队列 数据结构和算法的关系 数据data结构(structure)是一门研究组织数据方式的学科，有了编程语言也就有了数据结构.学好数据结构可以 编写出更加漂亮,更加有效率的代码 程序=数据结构+算法 数据结构是算法的基础, 换言之，想要学好算法，需要把数据结构学到位。 线性结构和非线性结构线性结构 线性结构作为最常用的数据结构，其特点是数据元素之间存在一对一的线性关系 线性结构有两种不同的存储结构 2018-08-28 数据结构与算法 概述
Hive常用命令汇总 Hive删除某一个分区数据12alter table ods_student drop partition(dt='2019-07-06')alter table ods_iot_linkage drop partition(dt='2020-07-06',hour='09') Hive中显示表所有分区1show partitions ods_student Hive 显示表信息12show 2018-07-08 Hive 命令
redis基础 概述 Redis 是速度非常快的非关系型（NoSQL）内存键值数据库，可以存储键和五种不同类型的值之间的映射。 键的类型只能为字符串，值支持五种数据类型：字符串、列表、集合、散列表、有序集合。 Redis 支持很多特性，例如将内存中的数据持久化到硬盘中，使用复制来扩展读性能，使用分片来扩展写性能 redis:Remote Dictionary Server(远程字典服务器) NoSQL数据库的优 2018-07-02 Redis NoSQL
MySQL权限问题 前言 连接mysql报错java.sql.SQLException: Access denied for user ‘root’@’IP一直会报错，尝试了修改host，还是有问题。 #给单个IP用户授权 12# 给一个用用户use ip: 1.1.1.1grant all on *.* to root@11.1.1.1 identified by 'passwd' 授权连接全部的ip地址12G 2018-06-17 MySQL troubleshooting