5.1之前, 全局变量存储在_G这个table中, 这样的操作:a = 1相当于：_G['a'] = 1但在5.2之后， 引入了_ENV叫做环境，与_G全局变量表产生了一些混淆，需要从原理上做一个理解。在5.2中，操作a = 1相当于_ENV['a'] = 1这是一个最基础的认知改变，其次要格外注意...
分类：
其他好文 时间：
2015-02-11 07:05:08
阅读次数：
178
Spark应用程序处理的大数据多是运行于JVM上的，经常要面对GC优化问题。下面给出由于Linux系统原因导致的GC耗时异常的处理方式：打开Spark的GC日志，在spark-env.sh文件中的SPARK_JAVA_OPTS参数上添加-verbose:gc-XX:+PrintGCDetails-X...
分类：
其他好文 时间：
2015-02-11 00:30:58
阅读次数：
304
思路：利用ruquest发送请求，利用多线程模拟并发下面直接上代码：#!/user/bin/env python#coding=utf-8import requestsimport datetimeimport timeimport threadingclass url_request(): ...
分类：
编程语言 时间：
2015-02-10 20:18:18
阅读次数：
273
#!/usr/bin/env python#coding=GBKfrom mpl_toolkits.mplot3d import Axes3D from matplotlib import cm from matplotlib.ticker import LinearLocator, Forma.....
分类：
其他好文 时间：
2015-02-10 13:18:02
阅读次数：
252
一个简单的需求，一个简单的脚本。
从一个ip开始，按照指定的数量，生成正确的ip地址。
#!/usr/bin/env python
## encoding: utf-8
import os,re
def getip(ip, count):
count = int(count)
ip2 = int(ip.split('.')[-2])
ip1...
分类：
编程语言 时间：
2015-02-09 18:24:58
阅读次数：
165
hadoop版本：Hadoop 2.3.0-cdh5.0.0
sqoop版本：Sqoop 1.4.4-cdh5.0.0
配置好sqooop-env.xml:
#Set path to where bin/hadoop is available
export HADOOP_COMMON_HOME=/my/hadoop
#Set path to where hadoop-*-...
分类：
其他好文 时间：
2015-02-08 23:16:27
阅读次数：
364
PHP Notice:Undefined index: QUICK_V3_ROOT in405,469,497,520,551这5行代码都访问了一个环境变量$_ENV['QUICK_V3_ROOT']，这里我不知道为什么现在取不到了，（希望php大神能给解释一下）,从网上找到用getenv('QUI...
分类：
其他好文 时间：
2015-02-08 15:26:05
阅读次数：
107
一. 安装mysql驱动：
由于mysql服务器以独立的进程运行，并通过网络对外服务，所以，需要支持python的mysql驱动来连接mysql服务器。
安装驱动：easy_install mysql-connector-python
二. 连接数据库：
下面演示使用python代码连接mysql：
#!/usr/bin/env python
# -*- coding: utf-...
分类：
数据库 时间：
2015-02-07 17:34:51
阅读次数：
145
在python 中字符串可以用 单引号(') 双引号(")三引号来标识但是只有'''才支持换行例子： #! /sur/bin/env python x=''' 1 2 3''' print(x);当是三引号时才支持换行，的字符串。
分类：
编程语言 时间：
2015-02-06 23:03:14
阅读次数：
130
#!/usr/bin/env pythonfrom Tkinter import Tkfrom time import sleepfrom tkMessageBox import showwarningimport win32com.client as win32warn = lambda app:...
分类：
其他好文 时间：
2015-02-06 18:18:18
阅读次数：
164
