大数据课程第五天 MapReduce中,Reduce可以没有 (纯数据的清洗,不用Reduce) job.setNumReduceTasks(0); 设置多个Reduce // 默认在MapReduce中 Reduce的数量是1 job.setNumReduceTasks(3);?//为什么Redu ...
分类：
其他好文 时间：
2019-01-26 18:57:50
阅读次数：
184
大数据课程第六天 Hive中MetaStore的切换 切换的步骤 Hive相关的配置文件 hive-default.xml ? hive-site.xml <!--显示数据库名--> <property> <name>hive.cli.print.current.db</name> <value>t ...
分类：
Web程序 时间：
2019-01-26 18:53:59
阅读次数：
206
刚开始接触Spark被Hive在Spark中的作用搞得云里雾里，这里简要介绍下，备忘。 参考：https://blog.csdn.net/zuochang_liu/article/details/82292076 SparkSQL：是一个完全不依赖Hive的SQL引擎。 Spark On Hive ...
分类：
数据库 时间：
2019-01-26 18:51:51
阅读次数：
390
可以使用TikZ，用TikZ绘制出来的图形效果非常好，原生支持所有LaTeX语法。 使用 LaTeX 画柱状图/条形图参考：Guide to draw charts (basic, pie, bar) from data Example: Matrix multiplication ： Exampl ...
分类：
其他好文 时间：
2019-01-26 17:08:36
阅读次数：
166
HAdoop集群实战一:Zookeeper集群部署HAdoop集群实战二:Hadoop集群部署HAdoop集群实战三:Namenode高可用HA部署HAdoop集群实战四:Hbase集群部署HAdoop集群实战五:Hive集群部署HAdoop集群实战六:Kafka集群部署HAdoop集群实战七:Hive、Hbase集群整合...待更新HAdoop集群实战八:Hive、Hbase集群整合测试...待
分类：
其他好文 时间：
2019-01-25 19:21:51
阅读次数：
208
1.注册函数，使用using jar方式在hdfs上引用udf库。 $hive>create function formattime as 'com.it18zhang.applogs.udf.FormatTimeUDF' using jar 'hdfs://hadoop01/app/app-log... ...
分类：
其他好文 时间：
2019-01-25 18:53:20
阅读次数：
221
1. 从http://sourceforge.net/projects/opencvlibrary/files/opencv-win/2.4.3/下载OpenCV2.4.3； 2. 将OpenCV-2.4.3.exe放到D:\soft\OpenCV2.4.3文件夹下，解压到当前文件夹下，生成一个op ...
1.前提 首先是hadoop的两个服务要开启 然后是hive 的metastore 然后启动spark-shell，如果没有启动hive的metastore，则会在这一步报错，说找不到hive的9083端口。至于启动spark-shell，则是为了看4040端口上的JDBS/ODBC服务 然后启动h ...
分类：
数据库 时间：
2019-01-25 11:31:50
阅读次数：
256
这是我正在写的博文系列中的另一篇,涵盖ASP.NETMVC3的一些新功能：http://weblogs.asp.net/scottgu/archive/2010/10/19/asp-net-mvc-3-new-model-directive-support-in-razor.aspxRazor中的布局10月22日)用Razor实现服务器端注释(11月12日)Razor的@:和<syntax&
分类：
Web程序 时间：
2019-01-24 10:58:37
阅读次数：
200
Django基础轮廓 MTV+controller 一 url分发系统: 1 简单使用 2 有名分组 3 分发include 4 反向解析 二、视图函数 1、请求对象request 2、响应对象 三、模板语法 1 渲染变量 {{val}} 2 渲染标签 {%%} 3、自定义标签和过滤器 from d ...
分类：
Web程序 时间：
2019-01-22 19:09:47
阅读次数：
235
