Application Application=a driver program + executors 一般来说：1个SparkContext = 1个application=1个SparkShell Spark提交任务不一定须在集群里提交，有gateway就行 1个application ==> ...
分类：
系统相关 时间：
2021-03-04 13:20:14
阅读次数：
0
背景介绍： 在多线程的环境里，如果共享资源没有上锁，将会出现共享数据混乱的情况。 在单核CPU系统里，系统以时间片调度的方式让多个程序轮流使用处理器，造成了【并发】的假象。 在进程/线程并发执行的过程中，进程/线程之间存在协作的关系，比如互斥、同步。 什么叫进程互斥？ 两个或两个以上的进程，不能同时 ...
分类：
编程语言 时间：
2021-03-03 12:23:58
阅读次数：
0
Spark 运行时相关概念 从集群的物理层面 Master 节点：部署 Cluster Manager的节点 Slave 节点：部署 Worker 的节点，每个节点可以有多个 Worker 进程 从进程层面(与所执行的应用无关) Cluster Manager：管理集群的 CPU、内存等资源，为不同 ...
分类：
其他好文 时间：
2021-03-03 12:14:39
阅读次数：
0
线程：进程上下文中执行的代码序列，又名轻量级进程。 在支持多线程的系统中，进程成为资源分配和保护的实体，线程是被调度执行的基本单元。进程是拥有资源的最小单位。 线程的分类 1）核心态线程（内核级线程）：所有管理操作都是有操作系统内核完成的 2）用户态线程（用户级线程）：一般我们操作的线程都是用户态线 ...
分类：
编程语言 时间：
2021-03-03 12:04:38
阅读次数：
0
本文详细介绍把.netcore发布到iis的方法，与ASP.NET时代不同，ASP.NET Core不再是由IIS工作进程（w3wp.exe）托管，而是使用自托管Web服务器（Kestrel）运行，IIS则是作为反向代理的角色转发请求到Kestrel不同端口的ASP.NET Core程序中，随后就... ...
省事儿 只需要两行代码 把下面两行保存文件后缀改成.vbs ，双击试试看吧。 这里的0表示进程启动,可改成1 set WSHshell = wscript.createobject("wscript.shell") WSHshell.run "cmd.exe /c vue ui",0,true 开机 ...
分类：
其他好文 时间：
2021-03-02 12:31:22
阅读次数：
0
查看程序对应的进程号： ps -ef | grep 进程名字 查看端口号所占用的进程： netstat -nltp | grep 端口 或者 netstat -anp | grep 端口 杀死进程 kill pid ...
分类：
系统相关 时间：
2021-03-02 12:19:11
阅读次数：
0
背景 LuckyFrame测试平台是一款免费开源的测试平台，最大的特点是全纬度覆盖了接口自动化、WEB UI自动化、APP自动化，并且支持分布式测试，点击直达官网。该框架的web端是基于Springboot框架，本文共享下通过Jenkins对LuckyFrameWeb进行自动部署的功能。 方法 1、 ...
分类：
其他好文 时间：
2021-03-02 12:00:21
阅读次数：
0
序列化和反序列化是什么 当两个进程远程通信时，彼此可以发送各种类型的数据。 无论是何种类型的数据，都 会以二进制序列的形式在网络上传送。比如，我们可以通过 http 协议发送字符串信息;我 们也可以在网络上直接发送 Java 对象。发送方需要把这个 Java 对象转换为字节序列，才能 在网络上传送; ...
分类：
编程语言 时间：
2021-03-02 11:58:06
阅读次数：
0
cd,pwd,ls,cp,mv,history,ps,top,netstat,grep,tar-cvf/xvf,这些是基本的 touch,cat,head,tail,跟文件相关 vim命令 vi,进入文件页， i，插入 esc,切换插入模式和命令模式，然后：wq,保存后退出 最近重点学习了awk命令 ...
分类：
系统相关 时间：
2021-03-02 11:57:34
阅读次数：
0
