最近有个需求,计算用户画像。 系统大概有800W的用户量,算每个用户的一些数据。 数据量比较大,算用hive还是毫无压力的,但是写的oracle,在给出数据给前端,就比较难受了。 然后换了种解决方法: 1.hive计算,写的HDFS 2.API读出来,写到hbase(hdfs和hbase的版本不匹配 ...
分类:
编程语言 时间:
2017-07-29 16:44:10
阅读次数:
221
在src目录下新建配置文件test.properties 格式为:key=value 内容为:name=louis 读取方式1: 读取方式2: 在配置文件中,中文会自动转成Unicode码,可以设置默认编码为utf-8 使用配置文件,可以将一些数据写到配置文件中,如数据库连接的数据。 ...
分类:
编程语言 时间:
2017-07-26 23:41:02
阅读次数:
175
今天遇到一个奇葩问题,在读取一个TXT文件时,出现开头多了一个问号(?)。如下图: 莫名奇妙的多了一个。最后通过网上资料,知道在Java中,class文件采用utf8的编码方式,JVM运行时采用utf16。Java的字符串是永远都是unicode的,采用的是UTF-16的编码方式。想测试一下,jav ...
分类:
编程语言 时间:
2017-07-25 19:59:04
阅读次数:
304
1.DOM 实现方法 xml文件 java文件 2.DOM4J 实现方法 XML文件 java文件 3.JDOM实现方法 XML和上面相同,java代码如下 注意:2,3方法需要引入相对应的jar包使用 ...
分类:
编程语言 时间:
2017-07-23 16:46:45
阅读次数:
227
一、从功能方面来说动态网站与静态网站的区别 1. 动态网站可以实现静态网站所实现不了的功能,比方说:聊天室、论坛、音乐播放、浏览器、搜索等;而静态的网站则实现不了。2. 静态网站,如用Frontpage或Dreamweaver开发出来的网站,其源代码是完全公开的,任何浏览者都可以非常轻松地得到其源代 ...
分类:
Web程序 时间:
2017-07-19 22:03:41
阅读次数:
259
Java 读取配置文件工具类 使用 java.util.Properties ...
分类:
编程语言 时间:
2017-07-13 16:14:35
阅读次数:
126
在web开发的过程中不免需要读取一些自定义的jvm系统变量或者环境变量.比如定义一些通用的log文件.或者数据库访问路径. 我们可以使用System.getProperties()读取所有的系统变量.通过System.getProperty("name");获取特定的系统变量 System.gete ...
分类:
编程语言 时间:
2017-07-04 00:56:56
阅读次数:
266
有如下几种解决办法:1、保证项目的字符编码和每一个jsp页面的字符编码一致,如果不一致可能导致中文乱码问题<%@ page language="java" contentType="text/html; charset=UTF-8" pageEncoding="UTF-8" %><meta http ...
分类:
数据库 时间:
2017-07-03 12:19:11
阅读次数:
159
软件151 陶涛 读取ini的配置的格式如下: 1 2 3 4 5 6 7 [section1] key1=value1 [section2] key2=value2 。。。。 1 2 3 4 5 6 7 [section1] key1=value1 [section2] key2=value2 。 ...
分类:
编程语言 时间:
2017-06-29 11:20:47
阅读次数:
149