网上翻了两天没找到一份有用的文章,自己研究SparkR的官方api文档,总算找到了实现的接口 我是用R语言加载SparkR库的方式,当然也可以直接用SparkR控制台就不用自己加载SparkR的库了 #首先加载sparkR的库 Sys.setenv(TEST_HOME = "/root/softwa ...
分类:
数据库 时间:
2018-06-28 15:21:54
阅读次数:
252
select,poll,epoll都是IO多路复用的机制。 I/O多路复用就是通过一种机制,一个进程可以监视多个描述符,一旦某个描述符就绪(一般是读就绪或者写就绪),能够通知程序进行相应的读写操作。 但select,poll,epoll本质上都是同步I/O,因为他们都需要在读写事件就绪后自己负责进行 ...
分类:
其他好文 时间:
2018-06-25 12:54:46
阅读次数:
164
共享内存 是最快的IPC通信方式,不存在数据复制,而是直接内存读写 涉及到多个进程访问,可能出现同时读、写操作,一般采用信号量的方式,进行互斥操作 步骤: 内存共享使用 1: ftok 使用某个文件做关键字创建key 2: shmget 使用key 创建(打开)共享内存 shmid 3: shmat ...
分类:
其他好文 时间:
2018-06-23 01:28:01
阅读次数:
168
备份策略 1、备份的类型 类型1: 热备份:读写不受影响(MyISAM不支持热备,InnoDB支持热备) 温备份:仅可以执行读操作 冷备份:离线备份,读写操作均中止 类型2: 物理备份:复制数据文件进行备份,占用较多的空间,速度快 逻辑备份:将数据导出至文本文件中,占用空间少,速度慢,可能丢失精度 ...
分类:
数据库 时间:
2018-06-22 21:43:37
阅读次数:
209
如何在Python读写文件?四部曲:open文件read文件 write文件close文件 例子:如何打开children文件并且显示 文件打开默认是只读权限,但是我们在打开文件的时候可以追加其他权限,例如读写 运行结果: hello word True True 逐行读取文件内容 利用for循环去 ...
分类:
编程语言 时间:
2018-06-21 18:27:18
阅读次数:
162
一、lseek函数 每个打开文件都有一个与其相关联的“当前文件偏移量”。它通常是一个非负整数,用以度量从文件开始处 计算的字节数。通常,读、写操作都从当前文件偏移量处开始,并使偏移量增加所读写的字节数。当打开一个文 件时,除非指定O_APPEND选项(调用open函数时使用了O_APPEND),否则 ...
分类:
系统相关 时间:
2018-06-20 00:08:04
阅读次数:
231
三个工具包 python操作excel的三个工具包如下 xlrd: 对excel进行读相关操作 xlwt: 对excel进行写相关操作 xlutils: 对excel读写操作的整合 注意,只能操作.xls,不能操作.xlsx。 这三个工具包都可以直接使用pip进行下载: xls文件的追写 xlwt只 ...
分类:
编程语言 时间:
2018-06-19 00:48:11
阅读次数:
206
本文将使用一个gitHub开源的组件技术来读写西门子plc数据,使用的是基于以太网的TCP/IP实现,不需要额外的组件,读取操作只要放到后台线程就不会卡死线程,本组件支持超级方便的高性能读写操作 github地址:https://github.com/dathlin/HslCommunication ...
分类:
移动开发 时间:
2018-06-18 21:45:02
阅读次数:
841
概述 广泛指对文件的读写操作 java的IO操作不仅仅是可以对文件进行读写,还可以对字符串,字节数组,对象,基本数据类型进行读写 操作分为按字节进行操作和按字符进行操作。当要求精度很高时,每一个字节都不能出错,比如在操作图片,视屏,音频等需要按字节流进行IO操作;之外的IO操作优先考虑字符,其效率要 ...
分类:
编程语言 时间:
2018-06-16 19:13:10
阅读次数:
165
一、备份策略 1、备份的类型 类型1: 热备份:读写不受影响(MyISAM不支持热备,InnoDB支持热备) 温备份:仅可以执行读操作 冷备份:离线备份,读写操作均中止 类型2: 物理备份:复制数据文件进行备份,占用较多的空间,速度快 逻辑备份:将数据导出至文本文件中,占用空间少,速度慢,可能丢失精 ...
分类:
系统相关 时间:
2018-06-16 17:49:35
阅读次数:
276