文章存档
文章中心
2015-10-10 09:23:13
Kafka文件存储机制
基础知识就不说了，详见 Kafka基本知识及安装配置
Kafka部分名词解释如下：
Broker：消息中间件处理结点，一个Kafka节点就是一个broker，多个broker可以组成一个Kafka集群。
Topic：一类消息，例如page view日志、click日志等都可以以topic的形式存在，Kafka集群能够同时负责多个topic的分发。
2015-09-29 16:32:02
Apache Kafka可以帮助你解决在发布/订阅架构中遇到消费数百万消息的问题。
Kafka是一个实时消息传输的解决方案，可处理大量实时信息，并把这些信息快速路由到各种消费者。Kafka提供了信息生产者和消费者之间的无缝集成，无需对生产者的信息进行阻塞，也无需告诉生产者那些消费者的位置。
Apache Kafka是一个开源、分布式的消息发布/订阅系统，其主要设计特性如下：
1）消息持久化
要从大数据中获
2015-08-21 11:19:56
declare和ticks可以用来做调试或性能测试。
一般用法是 declare(ticks=N);
拿declare(ticks=1)来说，这句主要作用有两种：
1、Zend引擎每执行1条低级语句就去执行一次 register_tick_function() 注册的函数。
可以粗略的理解为每执行一句php代码（例如:$num=1;）就去执行下已经注册的tick函数。
一个用途就是控制某段代码执行时间，例如下面的
2015-08-19 22:10:13
美国之所以称霸全世界，是因为它有两个拳头：一个是军事，一个是货币。这两个拳头打出的组合拳，几乎所向披靡，KO了一个又一个对象。接下来轮到中国上擂台了，但中国打的却是太极，讲究以柔克刚、四两拔千斤……
OK，在好戏上演之前，我们不妨先见招拆招，看看乔良将军如何拆解美国的组合拳，看清他的招数！
一、 金融帝国崛起
1944年7月，美国为了从大英帝国手中接过货币霸权，由罗斯福总统推动建立了三
2015-07-14 21:47:03
先贴一下官方wiki介绍：
http://nginx.org/en/docs/http/ngx_http_limit_req_module.html
http://nginx.org/en/docs/http/ngx_http_limit_conn_module.html
ngx_http_limit_conn_module 主要限制并发数
ngx_http_limit_req_module 主
2015-07-05 10:59:26
套用古龙武侠小说套路来说，代理服务技术是一门很古老的技术，是在互联网早期出现就使用的技术。一般实现代理技术的方式就是在服务器上安装代理服务软件，让其成为一个代理服务器，从而实现代理技术。常用的代理技术分为正向代理、反向代理和透明代理。本文就是针对这三种代理来讲解一些基本原理和具体的适用范围，便于大家更深入理解代理服务技术。
一、正向代理(Forward Proxy)
一般情况下，如果没有特别说明
2015-07-01 15:40:03
一、背景
今天我们来了解MySQL唯一索引的一些知识：包括如何创建，如何批量插入，还有一些技巧上SQL；
这些问题的根源在什么地方？有什么共同点？MySQL中也有分区对齐的概念？唯一索引是在很多系统中都会出现的要求，有什么办法可以避免？它对性能的影响有多大？
二、过程
(一) 导入差异数据，忽略重复数据，IGNORE INTO的使用
在MySQL创建表的时候，我们通常创建一个表的时候是以一个自增I
2015-06-19 15:09:50
在iPhone下，返回
Mozilla/5.0 (iPhone; CPU iPhone OS 5_1 like Mac OS X) AppleWebKit/534.46 (KHTML, like Gecko) Mobile/9B176 MicroMessenger/4.3.2
在Android下，返回
Mozilla/5.0 (Linux; U; Android 2.3.6; zh-cn; GT-S5
2015-06-19 10:44:43
面对2000多只股票，哪一只股票有庄家或强庄，哪一只股票没有庄家或只有弱庄，就是有庄家的话，目前股价又处于哪一阶段呢？这就要对该股的基本面及技术面进行全面、详细、科学的分析
后再作出结论。以下几条判断有没有庄家的方法，供你参考：
对十大股东情况判断：
如果在十大股东中有券商或是基金，他们很可能就是该股的庄家。如果券商或基金的持仓量很大，券商有几个营业部同时上榜，或同一基金管理公司的几只基金同时上榜，或
2015-03-25 19:26:17
慢查询日志分析
1、可以使用MySQL自带的mysqldumpslow工具。使用很简单，可以跟-help来查看具体的用法。
# -s：排序方式。c , t , l , r 表示记录次数、时间、查询时间的多少、返回的记录数排序；
# ac , at , al , ar 表示相应的倒叙；
# -t：返回前面多少条的数据；
# -g：包含什么，大小写不敏感的；
2015-03-20 14:37:33
1、创建HDFS目录
import java.io.IOException;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
public class MakeDir {
public static
2015-03-17 15:39:37
一、前言
Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。 其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析。
Hive是由Facebook贡献给Apa