hdfs:分布式文件系统 有目录结构,顶层目录是: /,存的是文件,把文件存入hdfs后,会把这个文件进行切块并且进行备份,切块大小和备份的数量有客户决定。 存文件的叫datanode,记录文件的切块信息的叫namenode Hdfs的安装 准备四台linux服务器 先在hdp-01上进行下面操作 ...
分类:
其他好文 时间:
2019-07-23 13:33:30
阅读次数:
98
工作中git常用操作记录,自己用的也不是特别熟练,希望大家多多指教,以后会继续完善。 1. 基础使用# git clone url <asName> 从现有的repository克隆到本地,最后的asName是别名,可选项 #新建本地仓库 (安装git后)在要创建git仓库repository的地方 ...
分类:
其他好文 时间:
2019-07-21 18:43:01
阅读次数:
77
1、首先排查微服务,没有发现JVM异常退出;(查看启动目录是否有hs_err_pid***.log) 2、查看log日志,如图: 发现服务于下午14:11被系统kill了。 3、查找服务器上历史操作记录,如下: 发现有一个salt重启的一个动作,然后查看/var/log/message日志,发现如图 ...
分类:
其他好文 时间:
2019-07-14 14:44:50
阅读次数:
72
1、linux切换到pg命令: 2、查看/退出pg 3、一般优化项 参数名 作用 64GB建议值 256GB建议值 shared_buffers 设置PostgreSQL中用于缓存的专用内存量。建议的设置值为机器总内存大小的25%。 16GB 64GB wal_buffers WAL(预写日志)记录 ...
分类:
系统相关 时间:
2019-07-10 18:38:13
阅读次数:
207
转自:https://www.cnblogs.com/kevingrace/p/7693042.html 一、RabbitMQ简单介绍在日常工作环境中,你是否遇到过两个(多个)系统间需要通过定时任务来同步某些数据?你是否在为异构系统的不同进程间相互调用、通讯的问题而苦恼、挣扎?如果是,那么恭喜你,消 ...
分类:
其他好文 时间:
2019-06-30 11:18:59
阅读次数:
114
[toc] 理论概述 一、各种集群简述 mongodb有三种集群搭建方式: 1. 分片 :sharding。指为处理大量数据,将数据分开存储,不同服务器保存不同的数据,它们的数据总和即为整个数据集。追求的是高性能。 2. 复制集 :Master Slave 模式(主从复制)。 3. 副本集 :副本集 ...
分类:
数据库 时间:
2019-06-22 01:30:43
阅读次数:
168
AOP (Aspect Oriented Programming) 面向切面编程。 业务有核心业务和边缘业务。 比如用户管理,菜单管理,权限管理,这些都属于核心业务。 比如日志管理,操作记录管理,这些都是边缘业务,可以统一的提出来。 尝试使用SpringBoot +AOP 提出操作记录业务。 ...
分类:
编程语言 时间:
2019-06-14 10:58:40
阅读次数:
173
一. Django必要的知识点补充 1. templates和static文件夹及其配置 1.1 templates文件夹 所有的HTML文件默认都放在templates文件夹下。 1.2 static文件夹 所有的静态文件(css,js,前端第三方类库)默认都放在static文件夹下。我们需要手动 ...
分类:
其他好文 时间:
2019-06-07 00:27:31
阅读次数:
200
插入时不指明id,不会自动生成id,和视频中的不一样啊 解决: 其实是可以的,不过put不可以 POST才可以 中文输入有问题: 待解决: 基本操作记录 批量操作 action_and_meta_data\noptional_source\n ...
分类:
其他好文 时间:
2019-05-20 22:54:46
阅读次数:
251
原文:MySQL 加锁和死锁解析 目录 产生死锁的必要条件 锁是加在那里的? 操作与加锁的对照关系 Insert Delete Update GAP锁 什么时候加next-key lock? Insert Intenti... ...
分类:
数据库 时间:
2019-05-20 01:24:05
阅读次数:
189