码迷,mamicode.com
首页 >  
搜索关键字:mapreduce 过滤器    ( 9498个结果
Filter过滤器
原文地址 使用Filter的完整流程:Filter对用户请求进行预处理,接着将请求交给Servlet进行处理并生成响应,最后Filter再对服务器响应进行后处理。 Filter链 在一个web应用中,可以开发编写多个Filter,这些Filter组合起来称之为一个Filter链。 web服务器根据F ...
分类:其他好文   时间:2020-07-09 01:06:10    阅读次数:113
PSO的MapReduce版
基于上一次运行成功查看输出文件没有结果的经历,这一次仔细理解了pso的MapReduce代码,发现自己之前的输入数据并不符合代码要求的格式,于是加以修改了。 根据此代码,输入数据应该是如下字段: 粒子编号、位置向量1、粒子速度1、个人最优位置1、全局最优位置1、位置向量2、粒子速度2、个人最优位置2 ...
分类:其他好文   时间:2020-07-08 19:30:59    阅读次数:65
大数据面试题
Linux部分 ①列举你使用的常用指令? ②怎么查看服务是否开启?后面的参数都是什么意思? ③怎么查看服务器内存使用情况? ④日志查看指令? ⑤跨机房怎么传输文件? Hadoop部分 ①怎么搭建一个Hadoop集群? ②Hadoop的Shuffer机制? ③切片概念?文件256M时,几个切片? ④M ...
分类:其他好文   时间:2020-07-08 13:03:03    阅读次数:59
一个简单的springboot+mybatis-plus+thymeleaf的学生管理系统
一、登录功能 1.1登录所涉及的功能主要包括拦截器,过滤器,用户在未登录的时候,访问页面会阻止访问的,如图所示: 实现这个功能的主要代码如下所示 1 //拦截器 2 public class LoginHandlerInterceptor implements HandlerInterceptor ...
分类:编程语言   时间:2020-07-08 01:24:05    阅读次数:86
Django自定义标签和过滤器
1、在 app 目录下创建 templatetags 目录(目录名只能是 templatetags)。 如: app/ __init__.py models.py templatetags/ __init__.py mytag.py views.py 2、创建任意 .py 文件,如:mytag.py ...
分类:其他好文   时间:2020-07-08 01:15:14    阅读次数:66
第一章:Hadoop基础介绍
Hadoop的整体框架 Hadoop由HDFS、MapReduce、HBase、Hive和ZooKeeper等成员组成。 HBase是一个开源的,基于列存储模型的分布式数据库 HDFS是一个分布式文件系统。有着高容错性的特点,并且设计用来部署在低廉的硬件上,适合那些有着超大数据集的应用程序 MapR ...
分类:其他好文   时间:2020-07-06 15:47:59    阅读次数:67
MapReduce运行原理和过程
一.Map的原理和运行流程 Map的输入数据源是多种多样的,我们使用hdfs作为数据源。文件在hdfs上是以block(块,Hdfs上的存储单元)为单位进行存储的。 1.分片 我们将这一个个block划分成数据分片,即Split(分片,逻辑划分,不包含具体数据,只包含这些数据的位置信息),那么上图中 ...
分类:其他好文   时间:2020-07-06 14:25:24    阅读次数:60
Python学习第122天(Django回头看:视图函数、redirect、模板变量、过滤器)
看来前段时间看的内容还是得再花一天才能复习完啊(此时更加对昨天的集体学习耿耿于怀) 今天重新复习了一下如题目所列的内容,下面来逐个说一下。 (1)视图函数 说这个东西其实基本是一个概念性的东西,主要说了一下视图函数涉及到的主要的两个方面 http请求:HttpRequest对象 http响应:Htt ...
分类:编程语言   时间:2020-07-06 01:01:55    阅读次数:105
缘起:BigTable
Google的三篇论文,Google File System,MapReduce以及Big Table可以说是整个大数据领域的三驾马车,这里,我们简单介绍下这三驾马车基本都是干哈的,重点解读下Bigtable: A Distributed Storage System for Structured ...
分类:其他好文   时间:2020-07-05 17:38:34    阅读次数:68
SpringBoot2.X新版本配置拦截器在项目中的使用
拦截器:和过滤器用途基本类似 SpringBoot2.X新版本配置拦截器 implements WebMvcConfigure 自定义拦截器 HandlerInterceptor preHandle:调用Controller某个方法之前 postHandle:Controller之后调用,视图渲染之 ...
分类:编程语言   时间:2020-07-05 17:26:07    阅读次数:81
9498条   上一页 1 ... 24 25 26 27 28 ... 950 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!