由于目前spark的历史服务所在的机器内存不太够,导致spark的hisstory server经常卡死。所以决定将该服务迁移到一台内存稍微多点的机器上,并将historyserver内存由原来的3g调整为8g,下面开始记录一下本次操作过程的步骤,方便以后进行查阅. 我们的生产环境采用的是spark ...
分类:
其他好文 时间:
2018-06-24 00:44:16
阅读次数:
162
简介 Zuul是Spring Cloud提供的api网关和过滤组件,它提供如下功能: 认证 过滤 压力测试 Canary测试 动态路由 服务迁移 负载均衡 安全 静态请求处理 动态流量管理 在本教程中,我们将用zuul,把web端的请求 转发到对应的产品服务上,并且定义一个pre过滤器来验证是否经过 ...
分类:
编程语言 时间:
2018-05-06 13:30:03
阅读次数:
159
LNMP服务环境都在一台机器上(IP:125),现在要做到把mysql服务迁移出来(IP:129),把图片文件迁移到NFS服务器上(IP:130) mysql服务器(129) 安装mysql配置过程(下载略) LNMP环境导出mysql中的数据(IP:125) 导入到mysql服务器中(129) 登 ...
分类:
Web程序 时间:
2018-02-07 19:44:48
阅读次数:
361
tomcat版本:8.5.20 公司项目服务迁移到另一台服务器,原本正常启动的项目,在另一台服务器(阿里云CentOS7)tomcat启动很慢,通常几百秒启动。查看日志可以发现 时间花在了生成session ID上。 这是由于Tocmat的Session ID的生成主要通过java.security ...
分类:
其他好文 时间:
2018-01-06 15:48:42
阅读次数:
227
背景公司打算2018年有把服务迁移到云上的计划,于是选择了市场上的几款云产品来进行比较,其中对磁盘IO与mysql读写性能的测试是很重要的一个环节。故此,针对云产品的磁盘IO以及云数据库的读写,进行了一些粗略的测试。这里测试的服务器来自腾讯云,这里暂且不讨论云的性能如何,之针对测试的方法来进行讲诉。sysbench工具测试连续IO,我们可以利用linux的dd命令,但是如何测试随机IO呢?sysb
分类:
数据库 时间:
2018-01-03 11:39:02
阅读次数:
267
今天将之前的一个瓦片图的服务迁移到了asp.net core试了一下,使用的时候感觉客户端刷新时有些慢,估计是并发连接数限制的原因。 由于这是一个开发中的版本,是用IIS Express部署的,IIS的并发连接数设置我倒是知道,但又懒的将其部署到iis上,便道网上搜索了一下IIS Express的并 ...
分类:
其他好文 时间:
2017-11-11 13:10:51
阅读次数:
178
研发环境的变更,或者研发完成进行项目现场实施、运维的时候,经常就会面临数据及服务的迁移,这其中就包含空间数据以及GeoServer服务的迁移工作。 这里需要提醒的是:如果采用的是类似的开源WebGIS技术方案,建议迁移前后的软件环境保持一致,以免发生一些意想不到的问题。 空间数据(PostGIS)迁 ...
分类:
Web程序 时间:
2017-07-12 17:53:10
阅读次数:
284
1. Spring Cloud netflix概览和架构设计 2. Dubbo&ZK分布式服务化改造(四)——Dubbo多注册中心 & 服务迁移 3. kafka如何直接查看log文件中的信息 4. kafka与Spring的集成 5. 深入理解Java 8 Lambda(语言篇——lambda,方 ...
分类:
其他好文 时间:
2017-06-29 22:32:19
阅读次数:
223
该怎样做,才能达成不盲目迁移服务的目标?建议按如下步骤, 1. 清理应用程序。确保应用程序具有良好的自动化测试套件,并使用了最新版本的软件包、框架和编程语言。2. 重构应用程序,把它拆分成多个模块,为模块定义清晰的 API。不要让外部代码直接触及模块内部,所有的交互应该通过模块提供的 API 来进行 ...
分类:
其他好文 时间:
2017-06-06 13:11:20
阅读次数:
177
01关于docker 最近在研究把服务从以前的虚拟机的方式,迁移到Docker的方式。 这样做的好处非常多。并且感觉上也是未来的趋势。 创业公司在做软件的时候,开始总是纠结成本。对比发现,其实做互联网创业真的是越来越容易了,首先不用像早期一样去购买机器,然后跑IDC,安装调试系统了,直接去aws申请 ...
分类:
其他好文 时间:
2017-05-15 10:45:13
阅读次数:
234