2018年05月的内容

hadoop

pig简介

pig简介
1.Pig 相比Java的MapReduce API,Pig为大型数据集的处理提供了更高层次的抽象,与MapReduce相比,Pig提供了更丰富的数据结构,一般都是多值和嵌套的数据结构。Pig还提供了一套更强大的数据变换操作,包括在MapReduce中被忽视的连接Join操作。...

1094℃ 0评论 0喜欢

hadoop

Hive简介

Hive简介
1.Hive Hive是一个数据仓库技术,包括解释器、编译器、优化器,一次将一个sql语句装化为mapreduce代码,然后对代码进行编译,最后优化执行。实质是一个客户端程序,类似jsp和servlet的关系,实际上jsp也是被转化为servlet的的。hive运行时,元数据是...

1080℃ 0评论 0喜欢

hadoop

什么是Zookeeper ?

什么是Zookeeper ?
什么是Zookeeper,Zookeeper的作用是什么,它与NameNode及HMaster如何协作? 一、什么是Zookeeper ZooKeeper 顾名思义 动物园管理员,他是拿来管大象(Hadoop) 、 蜜蜂(Hive) 、 小猪(Pig)  的管理员, Apac...

1052℃ 0评论 0喜欢

机器学习

朴素贝叶斯算法与垃圾邮件判断

朴素贝叶斯算法与垃圾邮件判断
机器学习之朴素贝叶斯算法进行垃圾邮件预测 贝叶斯决策优点包括在数据较少的情况下任然有效,可以处理多类别的问题,缺点是对于输入数据的准备方式较为敏感。 # coding: utf-8 #bayes.py from numpy import zeros,array,ones,lo...

1109℃ 0评论 0喜欢

Linux

linux常用命令大全

linux常用命令大全
系统信息  arch 显示机器的处理器架构(1) uname -m 显示机器的处理器架构(2) uname -r 显示正在使用的内核版本 dmidecode -q 显示硬件系统部件 - (SMBIOS / DMI) hdparm -i /dev/hda 罗列一个磁盘的架...

1287℃ 1评论 1喜欢

typecho

MaterialDesign高颜值模板

MaterialDesign高颜值模板
基于googlemeterial风格制作,一直颜值较高的模板,侧边栏有不同的相关设置。 在线演示 模板下载 转载请注明:沐雨语曦 » MaterialDesign高颜值模板...

1148℃ 0评论 1喜欢