大数据 003hive基础知识
转载外部-数仓-hive核心知识点 1.什么是Hive Hive是由Facebook开源用于解决海量结构……
大数据 002hadoop之yarn基础知识
yarn架构 yarn负责作业资源调度，在集群中找到满足业务的资源，帮助作业启动任务，管理作业的生命周……
大数据 001hadoop之hdfs基础知识
HDFS系统架构 HDFS数据安全性如何保证 存储在HDFS系统上的文件，会分割成128M大小的bloc……
大数据 003hive概念原理
转载外部 技术背景 因为mapreduce继承类和重写方法的固定化，导致编程代码模板化而且非常繁琐， 学习……
大数据 001hadoop之hdfs常用操作
hadoop fs -stat命令 d 当向HDFS上写文件时，可以通过设置dfs.block.size配置项来设置文件……
大数据 003hive优化相关
一.HIVE执行过程 二.hive表优化 1.分区 静态分区 动态分区 set hive.exec.dynamic.partition=true; set hive.exec.dynamic.partltlon.mode=nonstrict; 2.分桶 - set hive.enforce.bucketing=true; - set hive.enforce.sorting=true; 表优化数据……
Mysql 013表结构变更
当前mysql最大的记录数是7亿级 Executing: 1 2 3 4 ALTER TABLE `live_http_origin`.`o_xylive_flashsdk_one_20170414` ADD COLUMN `httpdns_resptime` DOUBLE NULL AFTER `httpdns_time`, ADD COLUMN `httpdns_clientip` VARCHAR(45) NULL AFTER `httpdns_resptime`, ADD COLUMN `httpdns_host` VARCHAR(200) NULL AFTER `httpdns_clientip`; 杀死my……
Mysql 012mysql锁相关
information_schema.partitions 表的分区信息 information_schema.processlist 客户端连接信息 information_schema.innodb_trx 当前运行的所有事务 information_schema.innodb_locks 当前出现的锁 information_schema.innodb_lock_waits 锁等待的对应关系 查询发生锁等待占有……
Mysql 011安装指南
一、安装mysql下载包 mysql5.7 centos7:https://dev.mysql.com/get/mysql57-community-release-el7-11.noarch.rpm mysql5.7 centos6:https://dev.mysql.com/get/mysql57-community-release-el6-11.noarch.rpm mysql5.6 centos7:https://dev.mysql.com/get/mysql-community-release-el7-5.noarch.rpm mysql5.6 centos6:https://dev.mysql.com/get/mysql-community-release-el6-5.noarch.rpm 二、安装过程 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24……
Mysql 010mysql索引介绍
一、简介 MySQL目前主要有以下几种索引类型： 普通索引 唯一索引 主键索引 组合索引 全文索引 二、语句 1 2 3……