减少应用和数据库的交互次数、同一个sql语句的执行次数减少表之间的关联，特别对于批量数据处理，尽量单表查询数据，统一在内存中进行逻辑处理，减少数据库压力（java处理批量数据不可取，尽量用c或者c++ 进行处理，效率大大提升）数据量比较大的，在设计过程中，为了减少其他表的关联，增加一些冗余字段，提高...
分类：
其他好文 时间：
2014-09-15 21:00:39
阅读次数：
229
脑功能刺激数据处理软件 BrainVoyager.QX.v2.0.7 1CDBrainVoyager 分析软件根据MRI扫描的大脑断层影像数据，在计算机中重现患者的个体头模，详细分析患者的大脑解剖结构，并能将大脑组织提取出来，将大脑皮层充分展开，结合EEG或脑磁图，分析EEG情况。可结合BESA 源...
分类：
其他好文 时间：
2014-09-15 12:49:38
阅读次数：
235
大数据数据处理最常用的是两类模式：批处理和流计算。在open source领域，批处理最有名的组件自然是大名鼎鼎的Hadoop MapReduce，而流计算则是Storm。 Storm是一个分布式的、容错的实时计算系统，目前是Apache 的一个incubator project (http://storm.incubator.apache.org/）。介绍Storm基本概念的文章已经很多了，本文就不再赘述。在此仅仅速记一下笔者实际安装 Storm的步骤。...
分类：
其他好文 时间：
2014-09-14 23:44:17
阅读次数：
284
今天小梦给大家分享一个简单的天气预报应用源码:调用的是百度API.整个应用都没有什么难点.只是一个简单的网络请求和json数据处理.在WP8.1有小娜的情况下,天气预报应用还有意义吗?我认为还是有点意义的,至少数据更详细,而要想要用户喜欢,必须有比小娜更人性化的提醒和精美的UI.UI必须要精美.当然...
分类：
其他好文 时间：
2014-09-14 20:43:47
阅读次数：
315
目标是爬取网站http://www.muyingzhijia.com/上全部的商品数据信息，包括商品的一级类别，二级类别，商品title，品牌，价格。搜索了一下，python的scrapy是一个不错的爬虫框架，于是基于scrapy写了一个简易的爬虫。先分析商品页面，在http://www.muyin...
分类：
Web程序 时间：
2014-09-14 18:00:07
阅读次数：
195
select a.pluno,a.pluname,a.spec,a.qty,d.qty,e.qty,a.dptno,substring(a.dptno,1,3),f.dptname,substring(a.dptno,1,4),g.dptname,substring(a.dptno,1,5),h.d...
分类：
其他好文 时间：
2014-09-14 15:16:07
阅读次数：
225
网络爬虫不仅仅可以爬取网站的网页，图片，甚至可以实现抢票功能，网上抢购，机票查询等。这几天看了点基础，记录下来。 网页的关系可以看做是一张很大的图，图的遍历可以分为深度优先和广度优先。网络爬虫采取的广度优先，概括的说来如下: 2个数组，一个记录已访问的网页(Al)，一个记录未访问的网页(Un...
分类：
编程语言 时间：
2014-09-14 12:51:17
阅读次数：
427
前天简单分享了用shell写网络爬虫的一些见解，今天特地把代码发出来与51博友分享，还是那句话，爱技术、爱开源、爱linux。针对脚本的注解和整体构思，我会放到脚本之后为大家详解。#!/bin/bash
#
#Thisscriptisusedtograbthedataonthespecifiedindustrywebsites
#Writtenbysuns..
分类：
其他好文 时间：
2014-09-14 11:27:27
阅读次数：
295
1应用环境mysqli预处理功能(大量数据处理时使用)2步骤a)mysqli连接数据库$mysqli = new mysqli('localhost','root','root','chuanzhi');b)设置编码$mysqli->set_charset('gb2312');c)发送query语句...
分类：
数据库 时间：
2014-09-14 10:04:56
阅读次数：
219
#-*-coding:utf-8-*-#python:2.x__author__='Administrator'importurllib2#例子LOGIN='wesc'PASSWD="you'llNeverGuess"URL='http://localhost'defh1(url):fromurlp...
分类：
编程语言 时间：
2014-09-13 17:10:35
阅读次数：
247
