1.准备数据源 mysql中表bigdata,数据如下: 2. 准备目标表 目标表存放hive中数据库dw_stg表bigdata 保存路径为 hdfs://localhost:9000/user/hive/warehouse/dw_stg.db/bigdata hive中建表语句如下: 注意点: ...
分类:
数据库 时间:
2018-01-24 18:10:19
阅读次数:
454
HamaWhite 原创,转载请注明出处。欢迎大家增加Giraph 技术交流群: 228591158 欢迎訪问: 西北工业大学 - 大数据与知识管理研究室 (Northwestern Polytechnical University - BigData and Knowledge Managemen ...
分类:
其他好文 时间:
2018-01-13 20:58:25
阅读次数:
191
4.0.0 thinkive.bigdata thinkive-bigdata-base 1.0.1-SNAPSHOT 4.1.1.RELEASE junit junit ${junit.junit.version} test ...
分类:
编程语言 时间:
2018-01-09 20:30:20
阅读次数:
156
1.搭建完hadoop后,出现“Unhealthy Nodes”不安全的节点 解决方法:在/opt/modules/hadoop-2.5.0/logs路径下查看resourcemanager用户日志,找到对应原因 NodeManager from node bigdata-01(cmPort: 38 ...
分类:
其他好文 时间:
2018-01-07 20:07:32
阅读次数:
891
参考: http://i.stanford.edu/~jure/pub/talks2/graphsage ieee_bigdata dec17a.pdf ...
分类:
其他好文 时间:
2017-12-16 19:50:24
阅读次数:
177
package com.ghc.bigdata import org.apache.spark.{SparkConf,SparkContext} /** * Created by Yu Li on 12/6/2017. */ object SparkScalaApp { def main(args: ...
分类:
其他好文 时间:
2017-12-06 13:03:45
阅读次数:
157
[root@bigdata-server-02 /]# ps --help all Usage: ps [options] Basic options: -A, -e all processes -a all with tty, except session leaders a all with t ...
分类:
系统相关 时间:
2017-11-13 21:19:13
阅读次数:
234
Apache Flume Flume is a distributed, reliable, and available service for efficiently collecting,aggregating, and moving large amounts of log data. It ...
分类:
Web程序 时间:
2017-09-29 11:01:56
阅读次数:
179
索引的概念 在关系型数据库中,索引是对数据库表中一列或多列的值进行排序的一种结构。 SQL SERVER中有索引的类型:按存储结构区分:“聚集索引(又称聚类索引,簇集索引)”,“分聚集索引(非聚类索引,非簇集索引)”按数据唯一性区分:“唯一索引”,“非唯一索引”按键列个数区分:“单列索引”,“多列索 ...
分类:
数据库 时间:
2017-09-23 14:27:37
阅读次数:
157
package my.bigdata; /** * Created by lq on 2017/8/22. */ import java.io.File; import java.io.FileInputStream; import java.io.FileNotFoundException; im... ...
分类:
其他好文 时间:
2017-09-09 09:40:08
阅读次数:
160