一、linux中查找文件属于那个软件包的方法 [root@salt prod]# whereis htpasswdhtpasswd: /usr/bin/htpasswd /usr/share/man/man1/htpasswd.1.gz [root@salt prod]# rpm -qf /usr/ ...
分类：
系统相关 时间：
2018-07-03 23:43:45
阅读次数：
173
1、Saltstack的httpapi 安装 ①、在官网更新yum源信息 ②、yum安装 yum install -y gcc make python-devel libffi-devel salt-api openssl pip install cherrypy 生成证书： # cd /etc/s ...
分类：
其他好文 时间：
2018-07-03 20:09:52
阅读次数：
211
先抛出问题：Spark on Yarn有cluster和client两种模式，它们有什么区别？ 用Jupyter写Spark时，只能使用client模式，为什么？ 写一篇文章，搞清楚 Spark on Yarn 的运行原理，同时回答上面的问题。 首先，把Spark和Yarn当做两个独立概念来看。单看 ...
分类：
其他好文 时间：
2018-07-03 14:57:21
阅读次数：
141
Hadoop家族的技术，网上资料多如牛毛，但是还是那句老话——好脑瓜不如烂笔头，看的再多也不如自己动手写一写。 Hadoop是一个分布式系统，有两个关键组件——HDFS和MapReduce，HDFS负责分布式文件存储，MapReduce是执行分布式任务的算法。 MapReduce只是一个分布式数据处 ...
分类：
其他好文 时间：
2018-07-02 19:28:10
阅读次数：
164
今天逛cnode社区，串联看到了RESTful的概念，做了这么久的开发，却也对这个协议没有听说，看来协议等基础概念需要补充了，这里扒一点好文整理下。 参考文章： https://cnodejs.org/topic/5b386b9657137f22415c5186 巧用 Swagger 在线编辑器生成 ...
分类：
其他好文 时间：
2018-07-02 12:36:39
阅读次数：
171
redis集群创建标签（空格分隔）：saltstack[toc]##安装配置redis集群[root@master1redis]#catredis.slsredis-installed:archive.extracted:-name:/ane/soft/-source:salt://redis/files/redis-3.2.1.tar.gz-archive_format:tar-if_missi
分类：
其他好文 时间：
2018-07-02 01:22:31
阅读次数：
231
（一）基础概念 线程：是程序执行流的最小单元（线程内部可开线程）、每一个程序都至少有一个线程、线程共享统一进程中的所有资源。 进程：是最小的资源单元（内存资源的分配与调度）线程共享进程中的资源,(每个进程中至少有一个线程（QQ\360)) 并发：是指系统具有执行多个任务（动作）的能力 并行：是指系统 ...
分类：
编程语言 时间：
2018-07-01 22:57:38
阅读次数：
217
1、基础概念 几乎每一种外设都是通过读写设备上的寄存器来进行的，通常包括控制寄存器，状态寄存器和数据寄存器三大类。外设的寄存器通常被连续的编址。根据CPU体系结构的不同，CPU对IO端口的编制方式有两种。 I/O映射方式（I/O mapped） 典型的，如x86处理器为外设专门实现了一个单独的地址空 ...
分类：
其他好文 时间：
2018-07-01 14:14:55
阅读次数：
206
安装 官方文档 https://docs.saltstack.com/en/latest/topics/ssh/index.html 配置 管理/etc/salt/roster文件，配置需要管理的所有主机 如何通过证书认证？ 1）执行 salt-ssh '*' test.ping -i，提示输入密码 ...
分类：
其他好文 时间：
2018-06-30 17:45:14
阅读次数：
172
基础概念 Spark Streaming 是 Spark Core API 的扩展, 它支持弹性的, 高吞吐的, 容错的实时数据流的处理. 数据可以通过多种数据源获取, 例如 Kafka, Flume, Kinesis 以及 TCP sockets, 也可以通过例如 map, reduce, joi ...
分类：
其他好文 时间：
2018-06-30 14:50:42
阅读次数：
206
