1.1.1.读取文本数据 spark应用可以监听某一个目录,而web服务在这个目录上实时产生日志文件,这样对于spark应用来说,日志文件就是实时数据 Structured Streaming支持的文件类型有text,csv,json,parquet ●准备工作 在people.json文件输入如下 ...
分类:
其他好文 时间:
2019-09-11 09:27:19
阅读次数:
137
Ceph包含在radosbenchRADOS存储集群上执行性能基准测试的命令。该命令将执行写测试和两种类型的读测试。--no-cleanup在测试读写性能时,该选项很重要。默认情况下,该radosbench命令将删除已写入存储池的对象。留在这些对象后面允许两个读取测试来测量顺序和随机读取性能。(1)准备工作,清除所有的文件系统缓存[root@node141mnt]#echo3>/proc/s
分类:
其他好文 时间:
2019-09-10 01:04:03
阅读次数:
167
using System.Collections;using System.Collections.Generic;using UnityEngine;using ZXing;using UnityEngine.UI;/// <summary>/// 二维码扫描识别功能/// </summary>p ...
分类:
编程语言 时间:
2019-09-08 22:48:32
阅读次数:
132
前提:frp不同系统 但是版本必须完全相同 这是我的两个版本 我这个就是验证frp可以在不同系统之间使用 准备工作 frps端 win vps 配置 然后 执行 客户端 意思是把我的7776端口弹到公网vps6000端口 然后 公网vps6000端口接受shell 监听 本地7776端口即可接受sh ...
准备工作: + 一台公网IP可访问的服务器 + SSH工具 授权服务器搭建过程: + 首先通过SSH工具连接你的服务器,下载激活文件 + 然后解压激活文件 + 编辑配置文件,使其开启自启 + 复制代码进去,然后按ESC,再按Shift和;键,输入wq,按回车确定 + 然后重启服务器,使其生效并启动 ...
分类:
系统相关 时间:
2019-09-07 10:50:51
阅读次数:
200
### 前言 最近项目中又一次需要集成友盟的三方登录与分享,之前没有记录过,所以这次来写一下... ### 准备工作 1.注册友盟账号创建应用,获取key:申请地址http://www.umeng.com 2.对对应的平台(腾讯、微信、新浪等等)申请第三方账号,获取key和密码 ### 集成步骤 因 ...
分类:
移动开发 时间:
2019-09-07 10:28:06
阅读次数:
107
新装ansible之后的准备工作:添加主机,加密保存密码;python3版本的问题:yum模块,selinux,pip;实战playbook:使用yum安装工具,安装python3,安装docker,Dockerfile制作镜像,账号和SSH安全优化,验证
分类:
其他好文 时间:
2019-09-04 10:02:50
阅读次数:
119
当需要从数据库查询的表有上万条记录的时候,一次性查询所有结果会变得很慢,特别是随着数据量的增加特别明显,这时需要使用分页查询。对于数据库分页查询,也有很多种方法和优化的点。下面简单说一下我知道的一些方法。 准备工作 为了对下面列举的一些优化进行测试,下面针对已有的一张表进行说明。 1、表名:orde ...
分类:
其他好文 时间:
2019-09-04 09:57:33
阅读次数:
74
0. 准备工作 1. 先备份 2. 创建用户以及创建数据库 3.执行恢复 ...
分类:
数据库 时间:
2019-09-04 09:50:33
阅读次数:
397
二次封装Response 序列化组件 准备工作 路由 模型:api/models.py 配置:settings.py 简单认识序列化 序列化类:api/serializers.py 序列化视图类:api/views.py 简单认识反序列化 反序列化类:api/serializers.py 序列化视图 ...
分类:
其他好文 时间:
2019-09-04 00:39:54
阅读次数:
108