Hadoop案例笔记2 内容接上一个笔记 Hadoop案例笔记1 我们对题目进行一个扩展，在上一个案例得出的结果上将统计的结果按照总流量的倒序排序

Hadoop 用户手机流量处理1 hadoop的mapreduce一个经典入门案例就是wordcount，对单词进行词频统计，其输入输出的数据类型都是ha

mysql主主互备 1 2 3 实验环境： hjj2017110109 192.168.160.80 hjj2017110109_node2 192.168.160.81 修改第一节点的/etc/my.cnf配置文件 添加如下 1 2 3 4 5 6 server_id = 1 log-bin = mysql-bin relay-log = mysql-relay-bin replicate-wild-ignore-table=mysql.% #指定不需要复

spark中的aggregate函数

学习到spark的RDD行动操作时，有一个函数可让我废了半天脑筋，就是aggregate函数，aggregate的意思是聚合

我们首先来看一下spark官方文档对这一函数的说明：

IDEA远程提交spark示例遇到的一个坑

先前使用idea进行远程提交spark程序采用的是local，也就相当于单机版spark，于是乎我又试了一下spark自带的standalone模式。但是在setMaster(“spark://192.168.160.30:7077”)的时候出现了问题