从WordCount开始分析
编写一个例子程序
编写一个从HDFS中读取并计算wordcount的例子程序:
packageorg.apache.spark.examples
importorg.apache.spark.SparkContext
importorg.apache.spark.SparkContext._
objectWordCount{
defm...
分类：
其他好文 时间：
2014-05-05 13:10:34
阅读次数：
463
这篇对应的是习题16，读写文件
# -*- coding: utf-8 -*-
#对文件更多操作复制A文件的内容到B文件
#from sys import argv
from os.path import exists
prompt = "> "
from_file = raw_input("please input the filename where you want to copy...
分类：
编程语言 时间：
2014-05-05 12:54:02
阅读次数：
402
在内的内部定义并使用，外部无法访问，以双下划线作为前作，定义后被python转为
_classname__变量名了
--------------------------------------------------------------------------------------
In [1]: class aa:
...: __x = 12 #私有变量_ _x...
分类：
编程语言 时间：
2014-05-03 17:37:55
阅读次数：
333
python中流程控制与函数编写
Last Eidt 2014/5/2...
分类：
编程语言 时间：
2014-05-03 17:17:00
阅读次数：
442
原理：利用python的win32模块，注册服务，让代码在后台运行，检测光盘并拷贝文件
启动的方法就是直接在cmd下，main.py install ，然后去windows 的服务下就可以看到The smallestpossible Python Service 这个服务，你可以启动，停止，还可以设置成开机自动启动。启动服务后，会自动检测光盘并在后台拷贝文件
main.py
import...
分类：
其他好文 时间：
2014-05-03 15:58:45
阅读次数：
235
BeautifulSoup 善于网页数据分析
请参考: http://www.crummy.com/software/BeautifulSoup
例如: 抓取CSDN首页极客头条内容 soup.py
import urllib2, re
from BeautifulSoup import BeautifulSoup
page = urllib2.urlopen("http://gee...
分类：
编程语言 时间：
2014-05-03 15:31:42
阅读次数：
401
本文主要介绍了MapReduce中的自定义计数器的相关内容。在上次的单词统计例子中，我们可以看到MapReduce在执行过程中会有很多的控制台输出信息，其中有一个很关键的内容：计数器。如下图：可以看到最上方的关键字：Counters，这就表示计数器。在这里，只有一个制表符缩进的表示..
分类：
其他好文 时间：
2014-05-03 14:56:19
阅读次数：
336
#在下载好的django路径下执行django的安装
#https://pypi.python.org/pypi/Django/1.6.4
python3setup.pyinstall
#
#新建django项目
django-admin.pystartprojectmysite
#
#运行django项目
python3manage.pyrunserver[port]
#
#创建一个app
python3manage.pystartappappname
#
..
分类：
编程语言 时间：
2014-05-03 14:48:38
阅读次数：
413
只是看看能不能成功使用python操作redis，redis具体的数据结构和使用会在以后学习。安装连接redis的包pipinstallredis本地已经在6379端口启动了redis服务。In[1]:importredis
In[2]:r=redis.StrictRedis(host=‘localhost‘,port=6379,db=0)
In[3]:r.set(‘foo‘,‘bar‘)
Out[3]:Tru..
分类：
编程语言 时间：
2014-05-03 14:38:32
阅读次数：
405
