Spark入门 一、 课程目标 目标1：熟悉Spark相关概念 目标2：搭建一个Spark集群 目标3：编写简单的Spark应用程序 二、 Spark概述 2.1什么是Spark（官网：http://spark.apache.org） Spark是一种快速、通用、可扩展的大数据分析引擎，2009年诞 ...
分类：
其他好文 时间：
2019-08-26 00:38:34
阅读次数：
67
[TOC] 一、 介绍 rabbitMQ 是基于 erlang 语言开发的， 为了使用 rabbitMQ 需要安装 erlang环境。 1、RabbitMQ是一个开元的消息代理和队列服务器，用来通过普通协议在完全不同的应用之间共享数据，RabbitMQ是使用Erlang语言来编写的，并且Rabbit ...
一、什么是Flink? Apache Flink是一个面向分布式数据流处理和批量数据处理的开源计算平台，提供支持流处理和批处理两种类型应用的功能。 二、Flink特点 1、现有的开源计算方案，会把流处理和批处理作为两种不同的应用类型：流处理一般需要支持低延迟、Exactly-Once保证，而批处理一 ...
分类：
其他好文 时间：
2019-08-14 12:51:45
阅读次数：
81
写在前面 在一款应用的整个生命周期，我们都会谈及该应用的数据安全问题。用户的合法性与数据的可见性是数据安全中非常重要的一部分。但是，一方面，不同的应用对于数据的合法性和可见性要求的维度与粒度都有所区别；另一方面，以当前微服务、多服务的架构方式，如何共享Session，如何缓存认证和授权数据应对高并发 ...
分类：
编程语言 时间：
2019-08-08 09:16:44
阅读次数：
109
端口号标识了一个主机上进行通信的不同的应用程序。 1.HTTP协议代理服务器常用端口号：80/8080/3128/8081/9098 2.SOCKS代理协议服务器常用端口号：1080 3.FTP（文件传输）协议代理服务器常用端口号：21 4.Telnet（远程登录）协议代理服务器常用端口号：23 H ...
分类：
Web程序 时间：
2019-07-31 12:49:28
阅读次数：
502
从测试角度来说,需要额外关注的场景就远不止断网、网络故障等情况了。对于弱网的数据定义,不同的应用所界定的含义是不一样且不清晰的,不仅要考虑各类型网络最低速率,还要结合业务场景和应用类型去划分。按照移动的特性来说,一般应用低于2G速率的都属于弱网,也可以将3G划分为弱网。除此之外,弱信号的Wifi通常 ...
分类：
移动开发 时间：
2019-07-30 00:40:48
阅读次数：
143
引言 Join是SQL语句中的常用操作，良好的表结构能够将数据分散在不同的表中，使其符合某种范式，减少表冗余、更新容错等。而建立表和表之间关系的最佳方式就是Join操作。 对于Spark来说有3中Join的实现，每种Join对应着不同的应用场景： Broadcast Hash Join ：适合一张较 ...
分类：
数据库 时间：
2019-07-25 23:06:28
阅读次数：
109
1. 创建Android项目 1) Application name：应用名称，launcher界面显示的 2) Company Domain：公司域名(sprd.com) 3) Package name：项目的包名，具有唯一性。系统通过包名区分不同的应用程序。 2. UI界面 1) 工具栏 2) ...
分类：
移动开发 时间：
2019-07-23 09:58:58
阅读次数：
117
Redis是一款著名的key-value内存数据库软件，同时也是一款卓越的数据结构服务软件。它支持字符串、列表、哈希表、集合、有序集合五种数据结构类型，同时每种数据结构类型针对不同的应用场景又支持不同的编码方式。这篇文章主要介绍压缩列表编码，在理解压缩列表编码原理的基础上介绍Redis对压缩列表的应用，最后再对Redis压缩列表应用进行分析。
分类：
其他好文 时间：
2019-07-14 00:20:06
阅读次数：
197
