关键性数据结构 hmap: map 的 header结构 bmap: map 的 bucket结构 mapextra: map 的 拓展结构 不是每一个map都包含 golang map 是用 hash map实现的,首先,我们先看 hash map是怎么实现的;然后我们再看 golang map ...
分类:
其他好文 时间:
2020-07-13 13:33:53
阅读次数:
54
1、业务需求:用户投保时保存全页面截图 2、截图插件:html2canvas 使用npm或yarn(可以使用淘宝镜像) npm install html2canvas yarn add html2canvas 在需要的页面引入html2canvas import html2canvas from ' ...
分类:
移动开发 时间:
2020-07-13 11:22:01
阅读次数:
111
一,执行流程 由图我们可以看到, MapReduce存在以下4个独立的实体。 JobClient:运行于client node,负责将MapReduce程序打成Jar包存储到HDFS,并把Jar包的路径提交到Jobtracker,由Jobtracker进行任务的分配和监控。 JobTracker:运 ...
分类:
其他好文 时间:
2020-07-12 22:18:50
阅读次数:
82
一、拦截器概念 springmvc中的拦截器(interceptor)类似于Servlet中的过滤器(Filter),它主要用于拦截用户请求并做相应的处理。在实际项目中会经常使用到拦截器,例如在购物网站中通过拦截器可以拦截未登录的用户,禁止其购买商品,或者使用它来验证已登录用户是否有相应的操作权限( ...
分类:
编程语言 时间:
2020-07-12 12:06:13
阅读次数:
78
Junit单元测试 测试分类 黑盒测试:不需要写代码,给输入值,看程序能否得到输出期望值. 白盒测试:需要些代码,关注程序具体的执行流程. Junit的使用 步骤 定义一个测试类(测试用例). 定义测试方法,可以独立运行. 给方法加@Test. 导入junit依赖环境. 判断结果 红色:失败 绿色: ...
分类:
其他好文 时间:
2020-07-11 10:03:49
阅读次数:
66
cat hadoop-env.sh export HADOOP_OPTS="$HADOOP_OPTS -Duser.timezone=GMT+08" cat yarn-env.sh YARN_OPTS="$YARN_OPTS -Duser.timezone=GMT+08" cat hbase-env ...
分类:
其他好文 时间:
2020-07-10 19:26:31
阅读次数:
86
先达到极限,然后再突破它 HA高可用 HA概述 所谓HA(High Available),即高可用(7*24小时不中断服务)。 实现高可用最关键的策略是消除单点故障。HA严格来说应该分成各个组件的HA机制:HDFS的HA和YARN的HA。 Hadoop2.0之前,在HDFS集群中NameNode存在 ...
分类:
其他好文 时间:
2020-07-10 17:23:12
阅读次数:
61
1.安装 zlib yarn add zlib 2.创建中间件 app/middleware/gzip.js const isJSON = require("koa-is-json"); const zlib = require("zlib"); module.exports = (options) ...
分类:
其他好文 时间:
2020-07-10 13:41:49
阅读次数:
154
摘要: 本篇主要剖析webmagic的downloader模块,对于httpclient模块涉及到的http相关的知识,例如:Request、Response以及重定向策略进行一定的分析。首先梳理了本模块的结构、然后对于执行流程进行了分析,最后对于其中涉及的设计模式:单例模式和相关算法进行了代码分析 ...
分类:
Web程序 时间:
2020-07-09 00:59:11
阅读次数:
113
主要看 spaceship 和deliver 两个模块 spaceship 导出了 Apple Developer Center and the App Store Connect API 据说是 所有你能在浏览器端做的 它都可以做到 而 deliver 模块 则是 负责进行数据的上传和下载,根据 ...
分类:
移动开发 时间:
2020-07-08 16:55:59
阅读次数:
89