典型架构 很多的场景都是如上的，有web（包括无线、以前CS的模式、现在的BS模式等）、DB、cache、数据分析我就用了Hadoop了（代名词，或者泛指数据仓库了），另外就是一些传感器之类的，数据通道（有的简单如：jdbc等，有的比较复杂，保序不丢等），其中也简单列了一些中间件的软件。这张图组成了 ...
分类：
其他好文 时间：
2021-05-24 09:02:34
阅读次数：
0
1.pandas df 与 spark df的相互转换 df_s=spark.createDataFrame(df_p) df_p=df_s.toPandas() import pandas as pd import numpy as np arr = np.arange(6).reshape(-1 ...
分类：
其他好文 时间：
2021-05-24 08:54:40
阅读次数：
0
1. top命令常用参数解释 字段解释 PID：进程的IDUSER：进程所有者PR：进程的优先级别，越小越优先被执行NInice：值VIRT：进程占用的虚拟内存RES：进程占用的物理内存SHR：进程使用的共享内存S：进程的状态。S表示休眠，R表示正在运行，Z表示僵死状态，N表示该进程优先值为负数%C ...
分类：
系统相关 时间：
2021-05-24 08:52:51
阅读次数：
0
windows 端口占用 解决办法,netstat -ano|findstr ,taskkill /pid 10396 /f ...
扫描以下常见未授权访问 redis、mongodb、memcached、elasticsearch、zookeeper、ftp、CouchDB、docker、Hadoop 安装 pip3 install -r requirements.txt -i https://mirrors.aliyun.co ...
分类：
其他好文 时间：
2021-05-24 08:32:18
阅读次数：
0
进程池的基本思想 由主进程管理所有监听socket,而各个子进程分别管理属于自己的连接的socket,子进程可以自己调用accept来接受新连接，这样父进程就无需向子进程传递socket,而只需要简单的说一声."我检测到了有新的连接，你来接受一下“ 进程池的代码逻辑 每个进程类都有一个m_pid用来 ...
分类：
系统相关 时间：
2021-05-24 07:43:26
阅读次数：
0
项目预计第一阶段花费十天的时间，第二阶段粗略估计要花一个月，因为第二阶段所需要的技术，像 Hadoop，kafka之类的之前并没有接触过，而第一阶段的工作，css、JavaScript、HTML，echarts等 在之前的学习中已有涉猎。目前已经花费十天，还剩余一个月 产品状态：目前已实现获取当前热 ...
分类：
其他好文 时间：
2021-05-24 07:14:48
阅读次数：
0
https://blog.csdn.net/linuxvfast/article/details/93720931 在Hadoop安装目录下找到sbin文件夹 在里面修改四个文件 对于start-dfs.sh和stop-dfs.sh文件，添加下列参数： #!/usr/bin/env bash HDF ...
分类：
其他好文 时间：
2021-05-24 06:40:05
阅读次数：
0
1、top cpu占用过高 2、docker stats 3、docker ps 4、docker exec -it /bin/bash 【id】 5、top 6、ps -mp [占用过高程序pid] -o THREAD,tid,time 7、printf "%x\n" [异常线程tid] 8、js ...
分类：
编程语言 时间：
2021-05-24 06:32:15
阅读次数：
0
##什么是Pod ###Pod是Kubernetes中最小的单元，它由一组、一个或多个容器组成，每个Pod还包含了一个 Pause容器，Pause容器是 Pod的父容器，主要负责僵尸进程的回收管理，通过 Pause容器可以使同一个 Pod里面的多个容器共享存储、网络 、PID、IPC等 ##定义一个 ...
分类：
其他好文 时间：
2021-05-24 06:02:47
阅读次数：
0
