Partitioner分区类的作用是什么? 在进行MapReduce计算时,有时候需要把最终的输出数据分到不同的文件中,比如按照省份划分的话,需要把同一省份的数据放到一个文件中;按照性别划分的话,需要把同一性别的数据放到一个文件中。我们知道最终的输出数据是来自于Reducer任务。那么,如果要得到多 ...
分类:
其他好文 时间:
2018-03-21 13:48:20
阅读次数:
159
实现要求: 一、实现功能模块; 校验省份、校验省份、校验出生日期、将15位的身份证转成18位身份证、数字验证、 将身份证的每位和对应位的加权因子相乘之后,再得到和值、将和值与11取模得到余数进行校验码判断、将字符数组转为整型数组. 二、针对所实现的模块编写对应的单元测试代码; import java ...
分类:
其他好文 时间:
2018-03-15 22:17:59
阅读次数:
191
任务选择一、实现模块判断传入的身份证号码的正确性; 一、实现功能模块; 身份证验证的工具(支持5位或18位省份证)身份证号码结构:17位数字和1位校验码:6位地址码数字,8位生日数字,3位出生时间顺序号,1位校验码。地址码(前6位):表示对象常住户口所在县(市、镇、区)的行政区划代码,按GB/T22 ...
分类:
其他好文 时间:
2018-03-13 22:47:19
阅读次数:
221
通过sql语句获取相邻时段数据不比通过其它编程语言,因为sql里面没有for循环,故在实现时需要增加一份副表数据,这里对该方法做一个记录。背景:获取2017年全年平台用户进出贵州省的次数(分为进港次数和出港次数)。处理方式:1.根据定位数据获取当年在贵州出现过的用户2.获取这些用户的全部定位数据,并根据定位时间进行排序如上,从左到右以此分别为用户id,定位时间,定位省份id,排序编号,是否定位在贵
分类:
其他好文 时间:
2018-03-02 23:08:07
阅读次数:
226
引言: 1、选取最适用的字段属性 MySQL可以很好的支持大数据量的存取,但是一般说来,数据库中的表越小,在它上面执行的查询也就会越快。因此,在创建表的时候,为了获得更好的性能,我们可以将表中字段的宽度设得尽可能小。 例如,在定义邮政编码这个字段时,如果将其设置为CHAR(255),显然给数据库增加 ...
分类:
数据库 时间:
2018-03-01 21:37:43
阅读次数:
220
引入jquery.js $.getScript('http://int.dpool.sina.com.cn/iplookup/iplookup.php?format=js',function(){ alert(remote_ip_info.country);//国家 alert(remote_ip_ ...
分类:
Web程序 时间:
2018-02-28 12:54:14
阅读次数:
503
星形模型 雪花模型 星型模型是所有维度表都是连接在一个事实表上面,雪花模型是将维度表拆分地更加详细,是多层次的。 在星型模型的维度表里面,一张维度表储存了众多存在冗余的信息,为什么冗余,在哪里冗余,我想了一个简单的例子。 如 地域维表 国家a GDP 国家b GDP 国家a 省份a GDP 国家a ...
分类:
其他好文 时间:
2018-02-21 18:17:55
阅读次数:
178
共享一份 世界、国家、省、城市最全的SQL(mysql可直接使用),笔者是花了下载币下载的 下载SQL # pid=0 获取所有国家 # pid=99999999 获取中国的省、自治区、直辖市、特别行政区 世界国家部分截图 中国的省份部分截图 拿走,不用谢 :) ...
分类:
数据库 时间:
2018-02-11 00:09:13
阅读次数:
269
//加载省份 $.ajax({ type: 'GET', url: "/cifcogroup/application/web/index.php?r=supply-chain-finance/choose-area&userId="+913555801+"&level=1&pid=0" , succ ...
分类:
其他好文 时间:
2018-02-08 12:15:23
阅读次数:
342
.net Core连接MongoDB 前两天在学习MongoDB相关的知识,做了个小Demo,做的是省份下面有多少所学校,嗯,做的比较粗暴。。。 连接MongoDB首先要通过Nuget添加一个MongoDB的包,下载此包 安装完毕后开始写代码了,创建一个省份实体,一个学校实体 using Mongo ...
分类:
数据库 时间:
2018-02-05 00:31:33
阅读次数:
203