1.pandas df 与 spark df的相互转换 df_s=spark.createDataFrame(df_p) df_p=df_s.toPandas() 2. Spark与Pandas中DataFrame对比 http://www.lining0806.com/spark%E4%B8%8E ...
分类：
其他好文 时间：
2021-05-24 07:11:40
阅读次数：
0
最近做一个爬虫项目，需要curl请求第三方系统，其中一个请求放到postman的时候秒回，代码curl请超时，打印错误信息：empty reply from server 翻阅网上资料无果，只能用排除法，去掉请求的一些配置看是哪里影响了，最后发现去掉post data 后请求秒回，虽然返回的是请求失 ...
分类：
Web程序 时间：
2021-05-24 07:00:36
阅读次数：
0
Docker部署redis主从+读写分离+哨兵 前段时间给第三方部署了redis主从+读写分离+哨兵集群环境，开发想验证程序代码的稳定性，需要在测试环境搭建一套该redis系统，便用Docker持久化部署一套即可，用完即删！ 一、规划 hostname ip port server master.r ...
分类：
其他好文 时间：
2021-05-24 07:00:10
阅读次数：
0
2020年11月4日study 2021年5月12日 review 01 阿里云服务器上Nginx安装 进入Nginx官网： 把下载好的nginx-1.18.0.tar.gz放到/usr/local/software/server下（为了便于管理，下载的软件建议放到/usr/local/下面） 安装 ...
分类：
其他好文 时间：
2021-05-24 06:54:47
阅读次数：
0
报错： Naticat11.1.13版本连接mysql8.0遇到报错： 1251-Client does not support authentication protocol requested by server 原因： 使用MySQL客户端Navicat连接数据库MySQL8.0，MySQL8 ...
分类：
其他好文 时间：
2021-05-24 06:32:38
阅读次数：
0
微服务架构学习（五）：Eureka 总结及注意事项（非VIP可通过我的订阅号查看） 废话不多说，上码： 我们已经有过将 Eureka Client 注册到本地 Eureka Server 服务上的介绍，但当时的本地 Eureka Server 服务是个单节点服务，在上篇中我们实现了 Eureka S ...
分类：
其他好文 时间：
2021-05-24 06:30:47
阅读次数：
0
前言 部署CentOS7的时候分配的动态扩充虚拟磁盘，共1T大小，在安装Centos时默认分区，系统仅给/分配50G，而大量空间都挂载到/home下，最近CentOS7使用中发现空间已不足够，所以就想如何将/home下的空间重新分配扩容到/下。 配置过程 查看分区大小 df -h 或者lsblk [ ...
分类：
其他好文 时间：
2021-05-24 06:24:49
阅读次数：
0
Scrapy 是一个通用的爬虫框架，但是不支持分布式，Scrapy-redis是为了更方便地实现Scrapy分布式爬取，而提供了一些以redis为基础的组件(仅有组件)。 一、Scrapy-Redis分布式策略： Master端(核心服务器)：搭建一个Redis数据库，并开启redis-server ...
分类：
其他好文 时间：
2021-05-24 06:20:04
阅读次数：
0
CS架构：客户机-服务器，即Client-Server（C/S）架构，缺少通用性，系统维护、升级需要重新设计和开发，增加了维护和管理的难度 BS架构：B/S架构即浏览器和服务器架构模式，是web兴起后的一种网络架构模式，web浏览器是客户端最主要的应用软件，统一了客户端，将系统功能实现的核心部分集中 ...
分类：
Web程序 时间：
2021-05-24 05:44:40
阅读次数：
0
Docker容器管理基础 运行第一个容器，容器启动必须依赖镜像。 [root@localhost ~]# docker image ls #首先查看已有的镜像REPOSITORY TAG IMAGE ID CREATED SIZEnginx latest 62d49f9bab67 3 weeks a ...
分类：
其他好文 时间：
2021-05-24 05:44:20
阅读次数：
0
