1、Redis API 1.安装redis模块 $ pip3.8 install redis 2.使用redis模块 import redis # 连接redis的ip地址/主机名,port,password=None r = redis.Redis(host="127.0.0.1",port=63 ...
分类:
编程语言 时间:
2020-06-24 12:13:30
阅读次数:
52
不用分析页面,无脑抓取table数据 酷python 个人python博客 www.coolpython.net 1 人赞同了该文章 如果你的爬虫所要爬取的内容存在于页面的table标签中,那么本文所探索的方法,对你非常有帮助。 下面两个网址中,都有非常规范的table数据 北京有哪些500强企业? ...
分类:
其他好文 时间:
2020-06-24 12:13:11
阅读次数:
73
一、logging模块简介 logging模块定义的函数和类为应用程序和库的开发实现了一个灵活的事件日志系统。logging模块是Python的一个标准库模块,由标准库模块提供日志记录API的关键好处是所有Python模块都可以使用这个日志记录功能。所以,你的应用日志可以将你自己的日志信息与来自第三 ...
分类:
编程语言 时间:
2020-06-24 12:11:46
阅读次数:
68
s = 'cdp\nd' result = eval(repr(s).replace('\\', '@')) print(result) repr() 函数可以将字符串转换为python的原始字符串(即忽视各种特殊字符的作用) 然后再使用eval() 函数将原始字符串转换为正常的字符串,不使用eva ...
分类:
编程语言 时间:
2020-06-24 12:06:33
阅读次数:
81
在使用vscode切换python的虚拟环境时报错 解决方法如下: Windows+x打开面板,选择以管理员身份运行PowerShell,输入: set-executionpolicy remotesigned,接下来输入“y”表示执行。 再次打开vscode,重新切换虚拟环境就可以了 ...
分类:
编程语言 时间:
2020-06-24 11:56:59
阅读次数:
196
python 使用多线程效果提升不高,因为只会占用一个cpu核,为了提升,需要使用多进程(比如 uwsgi 做服务) 这时候,在日志更新时就会出问题,通常日志更新是按天的,这时候多个进程就会重新去更新,比如: 进程a切换到 log.2020.06.22,进程b在切换的时候发现这个文件存在了就会去删除 ...
分类:
编程语言 时间:
2020-06-24 11:49:53
阅读次数:
103
背景 公司有一个数据处理线,上面的数据经过不同环境处理,然后上线到正式库。其中一个环节需要将数据进行处理然后导入到另外一个库(Sql Server)。这个处理的程序是老大用python写的,处理完后进入另外一个库后某些字段出现了乱码。 比如这个字符串:1006?267X(2020)02?0548?1 ...
分类:
数据库 时间:
2020-06-24 09:19:32
阅读次数:
116
写在前面 在程序设计中,序列是一种常用的数据储存方式,几乎每一种程序设计语言都提供了类似的数据结构,例如C语言,java中的数组。在python中序列是最基本的序列结构,它是一块用于存放多个值的连续内存空间。python内置了列表,元组,集合,字典和字符串5种基本序列结构。 1.索引和切片 (1)索 ...
分类:
其他好文 时间:
2020-06-24 09:12:06
阅读次数:
57
def lst(list): #定义一个函数,创建一个列表 lst1 = [] #在函数中定义一个空列表 for i in range(len(list)): if i %2 ==1: #i为奇数 lst1.append(list[i]) #list[i]添加到lst1列表中 return lst1 ...
分类:
编程语言 时间:
2020-06-24 00:33:44
阅读次数:
160
一.sql语句优化 (1)mysql 执行流程 客户端: 发送连接请求,然后发送增删改查sql语句进行执行 服务端: 1.连接层:提供和客户端连接的服务,在tcp协议下, 提供多线程并发的技术,让多个用户登录到mysql中. show processlist; 查看所有登录到mysql的用户进程 2 ...
分类:
编程语言 时间:
2020-06-24 00:32:56
阅读次数:
105