auto_increment_increment,auto_increment_offset1、auto_increment_increment与auto_increment_offset作用auto_increment_increment控制列中的值的增量值,也就是步长。auto_increment_offset确定AUTO_INCREMENT列值的起点,也就是初始值。变量范围:可以在全局以及s...
分类:
数据库 时间:
2014-10-04 17:49:06
阅读次数:
269
起因:最近需要从hbase中向 ES中导一批数据,使用multiprocessing 启动多个程序同时向ES导数据,可以大大提高效率,因为导数的任务是可以按照时间分割的。
令我十分不解的,multiprocessing 是如何实现任务的分发,以及结果的回传的。我希望能够把它的实现机制与操作系统的进程机制对应起来。
经过阅读代码,得出的结论如下:
1. 父进程作为整个任务的分发器,每个worker是一个子进程
2. 子进程和父进程之间通过管道通讯,包括任务的分发和结果的回传(2个【管道】) ,管道通过【信号量...
分类:
其他好文 时间:
2014-10-03 13:57:04
阅读次数:
284
Sometimes it is useful for a function to modify the objects it gets as parameters. In that case, the changes are visible to the caller. increment, whi...
分类:
其他好文 时间:
2014-10-02 14:14:33
阅读次数:
232
尤其在互联网世界,图计算越来越受到人们的关注,而图计算相关的软件也越来越丰富。本文将快速展示 Titan这个open source 的图数据库。...
分类:
数据库 时间:
2014-10-01 23:11:41
阅读次数:
525
首先建立分类信息表:1 CREATE TABLE IF NOT EXISTS `category` (2 `categoryId` smallint(5) unsigned NOT NULL AUTO_INCREMENT,3 `parentId` smallint(5) unsigned N...
分类:
Web程序 时间:
2014-10-01 11:21:30
阅读次数:
280
HBase为可伸缩海量数据存储而设计,实现面向在线业务的实时数据访问延迟。HBase的伸缩性主要依赖其可分裂的HRegion及可伸缩的分布式文件系统HDFS实现。HBase中,数据以HRegion为单位进行管理,也就是说应用程序如果想要访问一个数据,必须先找到HRegion,然后将数据读写操作提..
分类:
其他好文 时间:
2014-10-01 00:39:00
阅读次数:
249
需求
在推荐系统场景中,如果基础行为数据太少,或者过于稀疏,通过推荐算法计算得出的推荐结果很可能达不到要求的数量。
比如,希望针对每个item或user推荐20个item,但是通过计算只得到8个,剩下的12个就需要补全。
欢迎转载,请注明出处:
策略
数据补全的具体策略是:
补全时机:在挖掘计算结束后,挖掘结果导入HBase(最终web系...
分类:
数据库 时间:
2014-09-29 21:15:51
阅读次数:
295
需求:查询得到男性或女性的数量,如果传入的是0就得到男性的数量,如果是1就得到女性的数量数据库名mybatis数据库表userscreatetableusers(
idintprimarykeyauto_increment,
namevarchar(10),
sexchar(2)
);创建存储过程DELIMITER$
CREATEPROCEDUREmybatis.ges_user_count(INs..
分类:
其他好文 时间:
2014-09-29 17:17:01
阅读次数:
206
Oracle中序列Sequence的创建语法如下:CREATE SEQUENCE [ schema. ] sequence [ { INCREMENT BY | START WITH } integer | { MAXVALUE integer | NOMAXVALUE } | { MI...
分类:
其他好文 时间:
2014-09-28 20:41:05
阅读次数:
211
mysql主键设置成auto_increment时,进行并发性能测试出现主键重复Duplicate entry 'xxx' for key 'PRIMARY'
解决方法:
在my.cnf的[mysqld]片段中添加设置innodb_autoinc_lock_mode=0
同时注意调大jdbc的活跃链接数,如设置 jdbc.maxActive=300,因为设置innodb_autoinc_lo...
分类:
数据库 时间:
2014-09-28 19:51:05
阅读次数:
209