| 共 419 篇文章 |
|
用户首次登陆，实现绑定，以后使用微信账号登陆，好吧，这绑定也是只有绑定，没有解绑，而且是偷偷做的。。。。。、 用到接口 通过code获取用户信息、通过openId和 acces_token 获取用户信息 实现步骤： 一 获取code 二 通过code 走微信接口 获取 openId 三 openId 与用户Id 绑定。public String getOpenId(String code) throws Exception{ Op... 阅119 转0 评0 公众公开 15-12-11 16:34 |
jQuery验证控件jquery.validate.js使用说明+中文API.<input type="checkbox" class="checkbox" id="spam_email" value="email" name="spam[]" class="{required:true, minlength:2}" /><input type="checkbox" class="checkbox" id="spam_phon... 阅37 转0 评0 公众公开 15-10-14 18:07 |
import org.apache.hadoop.mapreduce.lib.output.3.7.5 “./bin/hadoop jar /home/brian/wordcount_01/wordcount.jar com.brianchen.hadoop.WordCount readme.txt output” 运行程序，处理readme.txt文件，将结果写入output目录，其中”jar”参数是指定jar包的位置，而”com.brianchen.hadoop.WordCount”，这里”com.brianchen.hadoop”是... 阅570 转7 评0 公众公开 15-04-10 12:27 |
解决Exception: org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z 等一系列问题，lja 解决Exception: org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z 等一系列问题，lja.I)Z atorg.apache.hadoop.io.nativeio.我们下载对应hadoop源代码，hadoop-2.6.0-src.tar.gz解压，hadoop-2.6.0-src\hadoop-common-project\hadoop-common\src\main\java\org\apache\hadoop\io\nativeio下NativeIO.java 复制到... 阅1833 转1 评0 公众公开 15-04-08 14:51 |
因此删掉hadoop-hadoop-jobtracker.pid和hadoop-hadoop-namenode.pid两个文件后，namenode自然就找不到datanode上的这两个进程了。在每次执行hadoop namenode -format时，都会为NameNode生成namespaceID,，但是在hadoop.tmp.dir目录下的DataNode还是保留上次的namespaceID，因为namespaceID的不一致，而导致DataNode无法启动，所以只要在每次执... 阅61 转0 评0 公众公开 14-11-19 14:43 |
hive 配置参数说明hive.exec.mode.local.auto 决定 Hive 是否应该自动地根据输入文件大小，在本地运行（在GateWay运行） true hive.exec.mode.local.auto.inputbytes.max 如果 hive.exec.mode.local.auto 为 true，当输入文件大小小于此阈值时可以自动在本地模式运行，默认是 128兆。/hive hive.metastore.warehouse.dir Hive 默认的数据文件存... 阅228 转1 评0 公众公开 14-11-19 13:20 |
假设rowKey原本是自增长的long型，可以将rowkey转为hash再转为bytes，加上本身id 转为bytes,组成rowkey，这样就生成随便的rowkey。1.取样，先随机生成一定数量的rowkey,将取样数据按升序排序放到一个集合里 2.根据预分区的region个数，对整个集合平均分割，即是相关的splitKeys. 3.HBaseAdmin.createTable(HTableDescriptor tableDescripto... 阅234 转2 评0 公众公开 14-10-27 17:11 |
done复制代码 运行上面的脚本，这样将每隔0.1秒往/home/wyp/Documents/data/data.txt文件中添加内容，这样master上的flume将会接收到/home/wyp/Documents/data/data.txt文件内容的变化，并变化的内容发送到node1机器上的flume，node1机器上的flume把接收到的内容插入到Hbase的wyp表中的cf:charges列中（见上面的配置）。 阅181 转0 评0 公众公开 14-08-05 11:12 |
HTablePool()HTablePool(Configuration config, int maxSize)HTablePool(Configuration config, int maxSize,HTableInterfaceFactory tableFactory)maxSize并非tablepool可创建的最大数，可以创建远大于设定值的表对象，当putTable()即返回时会与maxSize比较当前空闲数，空闲的已经有maxSize个，则直接释放表，不放入tablePool里HTableInterfac... 阅57 转0 评0 公众公开 14-08-01 14:44 |
在地理信息系统中，为了方便传输通常将数据切分为KB大小的文件存储在分布式文件系统中，论文结合WebGIS数据的相关特征，将相邻地理位置的小 文件合并成一个大的文件，并为这些文件构建索引。（2） 提出了一种两级预取机制以提高小文件的读取效率，（索引文件预取和数据文件预取）索引文件预取是指当用户访问某个文件时，该文件 所在的block对应... 阅25 转0 评0 公众公开 14-07-30 17:33 |
