MapReduce是一种编程模型，用于大规模数据集（大于1TB）的并行运算。概念”Map（映射）”和”Reduce（归约）”。
Tez是Apache开源的支持DAG作业的计算框架，它直接源于MapReduce框架，核心思想是将Map和Reduce两个操作进一步拆分，即Map被拆分成Input、Processor、Sort、Merge和Output， Reduce被拆分成Input、…
-
-
Source: https://my.oschina.net/zhzhenqin/blog/781793
Tez On Yarn 安装成功后，是为了给 Hive 或者 Pig 提供执行引擎。
Hive 默认支持 MapReduce，Tez，Spark（在 SparkSQL 中支持） 等执行引擎。因此给 Hive 换上 Tez 非常简单，只需给 hive-site.xml 中设置：
<pr… -
一、Suricata 分布式IDS项目 目的对办公网流量监听，入侵和违规行为告警
Suricata 由OISF(Open Information Security Foundation )开发为标准libpcap或libpfring接口，支持snort规则。OISF由DHS(United States Department of Homeland Security)及Breach S…
-
转载请附上地址，清风乐逍遥：http://blog.csdn.net/xiaobing_blog/article/details/12591917
1.将字符串的时间转换为时间戳
方法:
a = “2013-10-10 23:40:00”
将其转换为时间数组
&nb… -
原文 http://blog.tanteng.me/2016/03/redis-maxmemory/
Redis需要设置最大占用内存吗？如果Redis内存使用超出了设置的最大值会怎样？
设置Redis最大占用内存
Redis设置最大占用内存，打开redis配置文件，找到如下段落，设置maxmemory参数，maxmemory是bytes字节类型，注意转换。…
-
http://python.jobbole.com/82344/
装饰模式有很多经典的使用场景，例如插入日志、性能测试、事务处理等等，有了装饰器，就可以提取大量函数中与本身功能无关的类似代码，从而达到代码重用的目的。下面就一步步看看Python中的装饰器。
一个简单的需求
现在有一个简单的函数”myfunc”，想通过代码得到这个函数的大概执行时间。
我们可以直接把计时逻辑方法”myfunc”内部，但是这样…
-
原文：http://www.cnblogs.com/xing901022/p/4864690.html
Redis插件参数配置详解
最小化配置
input { redis { data_type => "list"#logstash redis插件工作方式 key => "logstash-test-list"#监听的键值 host => "127.0.0.... -
首先需要保证两个数据库的字符编码相同，查看命令：
show variables like ‘char%’;
若不相同用以下命令设置字符编码：
set character set latin1;
导出数据库用以下命令：
mysqldump -uroot -p12345 -hlocalhost –default-character-set=latin1 –databases dbName &g…
-
Linux共享库路径配置
Linux下找不到共享库文件的典型现象为明明已经安装某个软包（如libnet，MySQL），编译连接可以正常进行，但是在运行时出现如“error while loading shared libraries: libnet.so.1:cannot open shared object file :No such file or directory”的错误提示。原因是Li…
-
通常IDA对一个PE文件逆向出来的代码中，存在四个最基本的段text、idata、rdata、data，四个段为PE文件的结构中对应的段。
一、text段：
该段位程序代码段，在该段一开始就可以看到：.text:00401000 ; Segment type: Pure code
.text:00401000 ; Segment permissions: Read/Execute这里的段类型跟权限说明很…