什么是大数据?进入本世纪以来,尤其是2010年之后,随着互联网特别是移动互联网的发展,数据的增长呈爆炸趋势,已经很难估计全世界的电子设备中存储的数据到底有多少,描述数据系统的数据量的计量单位从MB(1MB大约等于一百万字节)、GB(1024MB)、TB(1024GB),一直向上攀升,目前,PB(等于 ...
分类:
其他好文 时间:
2018-11-14 11:00:40
阅读次数:
412
优步,Netflix和亚马逊等品牌为客户个性化设定了如此高的标准。凭借其强大的内置数据系统,先进的预测分析和机器学习系统,这些公司可以很好地了解客户在各个接触点的旅程,从而使他们能够为消费者提供更有价值和丰富的体验。 然而,与这些大品牌不同,并非所有公司都有幸从头开始优化个性化。为了给客户提供一致, ...
分类:
其他好文 时间:
2018-11-09 22:52:04
阅读次数:
476
一、SaltStack原理SaltStack有Master和Minion构成,Master是服务端,表示一台服务器:Minion是客户服务端,表示多台服务器。在Master上发送命令给符合条件的Minion,Minion就会执行相应的命令,Master和Minion之间是通过消息队列进行通信的。SaltStack的Master端监听4505与4506端口,4505位Master和Minion认证通
分类:
其他好文 时间:
2018-11-05 11:17:51
阅读次数:
126
环境:rhel6.5server1masterserver2minionserver3minion配置yum安装包:rhel6[root@server1~]#yuminstallsalt-master[root@server1~]#/etc/init.d/salt-masterstart[root@server2~]#yuminstallsalt-minion[root@server2~]#vim
分类:
其他好文 时间:
2018-11-04 17:00:47
阅读次数:
169
问题 在开发中,有一些全局数据,比如用户数据,系统数据等。这些数据很多组件中都会使用,我们当然可以每次使用的时候都去请求,但是出于程序员的“洁癖”、“抠”等等优点,还是希望一次请求,到处使用。 这时候很自然的想到存储在 localStorage 中,但是有个问题是,这些数据可能会变,如果没能及时同步 ...
分类:
其他好文 时间:
2018-11-03 17:25:34
阅读次数:
261
根据微服务架构的鼻祖 Martin Fowler 的忠告,微服务架构中应当尽量避免分布式事务。然而,在某些领域,分布式事务如同宿命中的对手无法避免。 在工程领域,分布式事务的讨论主要聚焦于强一致性和最终一致性的解决方案。 典型方案包括: 两阶段提交(2PC, Two-phase Commit)方案。 ...
分类:
其他好文 时间:
2018-11-03 14:09:51
阅读次数:
151
在应用的迭代演进过程中,随着系统访问量提高,业务复杂度提高,代码复杂度提高,应用逐渐从单体式架构向面向服务的分布式架构转变。RPC(RemoteProcedureCallProtocol远程过程调用)是分布式架构的核心,按响应方式分如下两种:同步调用:客户端调用服务方方法,等待直到服务方返回结果或者超时,再继续自己的操作异步调用:客户端把消息发送给中间件,不再等待服务端返回,直接继续自己的操作。同
分类:
其他好文 时间:
2018-11-02 21:34:16
阅读次数:
218
RedHat7.X系列linux搭建NTP服务详细方法ntp也就是时间服务器原理和作用:1.大数据产生与处理系统是各种计算设备集群的,计算设备将统一、同步的标准时间用于记录各种事件发生时序,如E-MAIL信息、文件创建和访问时间、数据库处理时间等。2.大数据系统内不同计算设备之间控制、计算、处理、应用等数据或操作都具有时序性,若计算机时间不同步,这些应用或操作或将无法正常进行。3.大数据系统是对时
分类:
系统相关 时间:
2018-11-02 14:37:20
阅读次数:
179
saltstack常用执行模块:cron模块archive模块cmd模块cp模块dnsutil模块file模块group模块network模块service模块pkg模块user模块一、cron模块:功能:实现被控主机的crontab操作[root@salt-master~]#salt‘*‘sys.list_functionscronizwz9f8xrvty50quc2gq50z:-cron.li
分类:
其他好文 时间:
2018-11-02 00:17:18
阅读次数:
171
SaltStack原理:SaltStack由Master和Minion构成,master是服务端,表示一台服务器;minion是客户服务端,表示多台服务器。在master上发送命令给minion,minion就会执行相应的命令。master与minion之间是通过ZeroMQ(消息队列)进行通信的。SaltStack的master端监听4505与4506端口,4505为master和minion认
分类:
其他好文 时间:
2018-11-01 18:25:43
阅读次数:
199