本人负责系统基础框架的搭建和数据处理，数据的大致流程： 主要包括： 上线后出现一个严重的问题：有些交易数据查询不到。分析后发现a)客户端没有报错; b)ElasticSearch没有订单数据; c)同步RabbitMQ数据到ElasticSearch的服务没有相关的日志。那么可以认定问题是Rabbi ...
分类：
其他好文 时间：
2018-03-26 20:47:13
阅读次数：
363
base_page.py browser_engine.py logger.py baidu_homepage.py 测试类代码 baidu_search.py ...
分类：
编程语言 时间：
2018-03-20 11:21:34
阅读次数：
363
什么是大数据？进入本世纪以来，尤其是2010年之后，随着互联网特别是移动互联网的发展，数据的增长呈爆炸趋势，已经很难估计全世界的电子设备中存储的数据到底有多少，描述数据系统的数据量的计量单位从MB（1MB大约等于一百万字节）、GB（1024MB）、TB（1024GB），一直向上攀升，目前，PB（等于1024TB）级的数据系统已经很常见，随着移动个人数据、社交网站、科学计算、证券交易、网站日志、传感器网络数据量的不断加大，国内拥有的总数据量早已超出 ZB（1ZB=1024EB，1EB=1024PB）级别。
分类：
其他好文 时间：
2018-03-14 15:06:35
阅读次数：
157
什么是大数据？进入本世纪以来，尤其是2010年之后，随着互联网特别是移动互联网的发展，数据的增长呈爆炸趋势，已经很难估计全世界的电子设备中存储的数据到底有多少，描述数据系统的数据量的计量单位从MB（1MB大约等于一百万字节）、GB（1024MB）、TB（1024GB），一直向上攀升，目前，PB（等于 ...
分类：
其他好文 时间：
2018-03-14 12:51:23
阅读次数：
156
长久以来,.Net开发人员都非常羡慕Java有Netty这样，高效，稳定又易用的网络通信基础框架。终于微软的Azure团队，使用C#实现的Netty的版本发布。不但使用了C#和.Net平台的技术特点，并且保留了Netty原来绝大部分的编程接口。让我们在使用时，完全可以依照Netty官方的教程来学习和 ...
分类：
Web程序 时间：
2018-03-11 22:32:29
阅读次数：
455
一、什么是大数据 进入本世纪以来，尤其是2010年之后，随着互联网特别是移动互联网的发展，数据的增长呈爆炸趋势，已经很难估计全世界的电子设备中存储的数据到底有多少，描述数据系统的数据量的计量单位从MB（1MB大约等于一百万字节）、GB（1024MB）、TB（1024GB），一直向上攀升，目前，PB（ ...
分类：
其他好文 时间：
2018-03-10 15:52:22
阅读次数：
164
No1： Lock接口 No2： 不要讲获取锁的过程写在try块中，因为如果在获取锁（自定义锁的实现）时发生了异常，异常抛出的同时，也会导致锁无故释放 No3： No4： 队列同步器（同步器）是用来构建锁或者其他同步组件的基础框架，它使用了一个int成员变量表示同步状态，通过内置的FIFO队列来完成 ...
分类：
编程语言 时间：
2018-03-08 23:01:37
阅读次数：
266
文章转载自 "AbstractQueuedSynchronizer的介绍和原理分析" 建议去看一下原文的评论，会有不少收获。 简介 AbstractQueuedSynchronizer 提供了一个基于FIFO队列，可以用于构建锁或者其他相关同步装置的基础框架。该同步器（以下简称同步器）利用了一个in ...
分类：
其他好文 时间：
2018-03-02 23:53:55
阅读次数：
252
思考： 项目定位清晰，每日的数据量大小，最高并发预测 项目方向确定，电商？信息系统？采集系统？ 项目是否会进行多次升级（二次需求）？ 项目是否会持续维护？ 项目是否会面临数据库的迁移？ 项目数据的重要性程度？ 根据文件大小及量，项目方向确定你的基础框架是否需要做图片或文件服务器，并发瓶颈是否需要做数 ...
分类：
其他好文 时间：
2018-03-02 14:44:02
阅读次数：
101
事情是这样的 之前我们做了一个项目，已经做完了，我想将项目框架整理一下，就新建了一个项目，新项目的基础框架直接从原来项目中copy了一份。 修改了命名空间后直接运行，发现出现了如下错误： 很显然这是没有找到命名空间. 于是 去这个页面找 Pay.NewAdmin 这个命名空间的引用 发现 是这样的： ...
分类：
其他好文 时间：
2018-02-13 16:41:44
阅读次数：
102
