MySQL常规使用
1.数据库主要部分:tables tableview存储过程 函数索引2.创建一个ruozedb数据库和用户:用户对这个DB有所有权限;create database ruozedb;grant all privileges on ruozedb.* to ruoze@'192.168.137.252' identified by '123456';grant all privileges on ruozedb.* to ruoze@'192...
MySQL部署
https://github.com/Hackeruncle/MySQL/blob/master/MySQL%205.6.23%20Install.txt1.Download [root@ruozehadoop000 ~]# cd /usr/local#选择win7的mysql软件包[root@ruozehadoop000 local]# rz 导入2.Check isnot install[root@ruozehadoop000 local]# ps -ef|grep mysqldroot &nb...
Linux常用命令三
1.权限读 r 4写 w 2执行 x 1无权限 --rw-r--r--drwxr-xr-x第一个字符 -:代表是文件 d:代表是文件夹rwxr-xr-x: 三组 rwx: 第一组 7(4+2+1) 代表root用户对这个文件或文件夹的权限 r-x: 第二组 5 (4+1) 代表root用户组对这个文件或文件...
Linux常用命令二
1.创建文件夹mkdir file0 创建1个文件夹mkdir file1 file2 file3 同时创建多个同级文件夹mddir -p file1/file2/file3 创建级联文件夹 2.创建文件vi Lynn.log 可自行选择创建空或不空的文件touch Lynn0.log 创建空文件echo "" > ruoze.log &...
配置固定IP和外网
1.关闭电脑防火墙和杀毒软件。2.关闭CentOS虚拟机的防火墙service iptables stop3.开启共享网络 3.1 进cmd , ipconfig查看DNS,VM8 3.2配置VM8网卡 3.3进虚拟机配置网卡 3.4虚拟机中编辑文件ifcfg-eth0配置环境变量...
Linux常用命令一
1.Linux常用命令vi命令 用于编辑文件用CRT / Xshell 软件 连接虚拟机,以方便操作pwd命令 可查看当前目录ls 查看 -l 权限信息 用户和用户组 时间 等价于 ll -a 隐藏文件/文件夹 是以.开头 .xxx alias命令 起别名 可简化命令语句临...
CentOS部署
1.CentOS部署2.CentOS hostname修改 分为永久修改以及临时修改3.配置CentOS虚拟机的固定ip和访问外网
Hive内部函数之聚合函数和分组函数
1. 常用的聚合函数: max 最大值 min 最小值 count 总数 sum 和 &nb...
hive的内部表和外部表区别
1 内部表 1.1 创建表默认使用的是MANAGED_TABLE:内部表。 1.2 内部表在drop table 的时候存储在RDBMS上的元数据和存储在HDFS上的数据全部被删除。2 外部表(EXTERNAL) 2.1 创建外部表需要指定。语法: CREATE [EXTERNAL TABLE table_nam...
Hive DDL&DML
Hive构建在Hadoop之上: Hive的数据存放在HDFS之上 Hive的元数据可以存...
SQOOP+HADOOP+HIVE+MySQL统计各个区域下最热门的TOP3的商品
环境: hadoop-2.6.0-cdh5.7.0 hive-1.1.0-cdh5.7.0 sqoop-1.4.6-cdh5.7.0 MySQL5.6.39需求:HIVE统计各个区域下最...
CTO视角解读:国外企业选择Hadoop时到底在犹豫什么?
随着“Hadoop是否已失宠”的选题调研进程过半,国内外企业以及厂商的观点确实存在很大分歧,有人认为是国外Hadoop厂商所提供的服务以及架构不如国内厂商完善,也有观点表明国外大部分企业的数据量根本达不到使用Hadoop的层级,因此对Hadoop比较冷漠。那么,事实到底是什么样的呢?
技术解读:Hadoop、PostgreSQL与Storm正面比拼报告!
在“Hadoop是否已失宠?”的选题调研中,笔者调查了银行、Hadoop发行商、Hadoop企业用户以及部分工程师的意见,所处环境、业务需求以及看问题角度的不同让这些组织或个人有着不同的意见。如果你的数据量和增长速度还未达到使用Hadoop的级别,你一定会认为Hadoop是十分不明智的选择;相反,当你已经从Hadoop生态受益良久时,你一定会认为这是大数据时代最佳解决方案之一,比如那些从PostgreSQL迁移至Hadoop的企业。
一条数据HBase之旅,简明HBase入门教程开篇
这是HBase入门系列的第1篇文章,介绍HBase的数据模型、适用场景、集群关键角色、建表流程以及所涉及的HBase基础概念,本文内容基于HBase 2.0 beta2版本。本文既适用于HBase新手,也适用于已有一定经验的HBase开发人员。
Hadoop大数据面试题全版本,必看跳槽指南!
以下资料来源于互联网,很多都是面试者们去面试的时候遇到的问题,我对其中有的问题做了稍许修改了并回答了部分空白问题,有些考题出的的确不是很好,但也不乏有很好的题目,这些都是基于真实面试而来,希望对即将面试或想继续学习hadoop,大数据等方向的朋友有所帮助!
苏宁易购:Hadoop失宠前提是出现更优秀的替代品!
在笔者持续调研国内Hadoop生态系统生存现状的同时,KDnuggets发布的2018年数据科学和机器学习工具调查报告再次将“Hadoop失宠”言论复活。报告一出,“Hadoop被抛弃”几个字瞬时成为各大标题党的最爱,充斥在不同的新闻平台。这些报告和数据是否足以动摇Hadoop在国内大数据领域的事实标准地位?本身并不擅长处理OLAP计算和ms级延迟要求的流计算,这是否会成为企业弃用Hadoop的重要原因?对于繁多的组件和搭配,企业倾向于哪种组合方式呢?
一条数据HBase之旅,简明HBase入门教程开篇
这是HBase入门系列的第1篇文章,介绍HBase的数据模型、适用场景、集群关键角色、建表流程以及所涉及的HBase基础概念,本文内容基于HBase 2.0 beta2版本。本文既适用于HBase新手,也适用于已有一定经验的HBase开发人员。
大数据分析系统Hadoop的13个开源工具!
Hadoop是由Apache基金会开发的一个大数据分布式系统基础架构,最早版本是2003年原Yahoo!DougCutting根据Google发布的学术论文研究而来。用户可以在不了解分布式底层细节的情况下,轻松地在Hadoop上开发和运行处理海量数据的应用程序。低成本、高可靠、高扩展、高有效、高容错等特性让Hadoop成为最流行的大数据分析系统,然而其赖以生存的HDFS和MapReduce组件却让其一度陷入困境——批处理的工作方式让其只适用于离线数据处理,在要求实时性的场景下毫无用武之地。
hadoop部署
Hadoop的三种模式:Standalone Operation 单机模式 不开发 不生产 没有进程Pseudo-Distributed Operation 伪分布式 开发 不生产 独立进程 但是只部署在1台机器Fully-Distributed Operation 分布式 开发 生产 独立进程 但是只部署在n台机器部署:1.解压命令:tar -xzvf hadoop-2.8.1.t...
面对国产基础软件困境,进击的星环如何突围?
5月3日,星环科技在上海举办了2018第二届前沿科技论坛暨星环用户大会,在此次大会上,星环宣布了众多的重磅消息:发布最新的系列产品、星环TDH平台通过TPC-DS基准测试、与新加坡人工智能核心项目签署了战略合作协议……