码迷,mamicode.com
首页 > 2020年02月13日 > 全部分享
使用python爬取淘宝商品名称和价格
最近在家闲得无聊,由于家里开网点,妈妈对于起商品标题感到很头痛,所以我就想在淘宝爬取一些信息。 小破站找了个学习视频,跟一遍发现视频是2018年的,而淘宝在2019年可能加入了反爬取机制,使用正常的方法爬不到结果。 但是有一种方式可以爬取,要先登陆淘宝网页版,然后去搜索,获取cookie和user- ...
分类:编程语言   时间:2020-02-13 20:53:21    阅读次数:333
在一个千万级的数据库查寻中,如何提高查询效率?
一、数据库设计方面1、对查询进行优化,应尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引; 2、应尽量避免在 where 子句中对字段进行 null 值判断,否则将导致引擎放弃使用索引而进行全表扫描,如: select id from t where num is ...
分类:数据库   时间:2020-02-13 20:53:08    阅读次数:76
关于springbatch的一些经验
spring.batch.job.enabled=false#默认自动执行定义的Job(true),改为false,需要jobLaucher.run执行step单节点的多线程并行执行@BeanpublicStephelloWorldStep(StepBuilderFactorystepBuilders){returnstepBuilders.get("helloWorldStep&quo
分类:编程语言   时间:2020-02-13 20:52:57    阅读次数:105
JDBC
主要内容 1. JDBC基本概念 2. 快速入门 3. 对JDBC中各个接口和类详解 4. 数据库连接池 5. Spring JDBC : JDBC Template JDBC: 1. 概念:Java DataBase Connectivity Java 数据库连接, Java语言操作数据库 JDB ...
分类:数据库   时间:2020-02-13 20:52:22    阅读次数:66
Rejecting Good Engineers?
Has any interviewer in the tech industry realized that they lost a good software engineer just because he/she failed the algorithms interview? By Dmit ...
分类:其他好文   时间:2020-02-13 20:52:06    阅读次数:85
rz上传文件及出错解决方案
lrzsz首先,我们看下rzsz工具使用的ZModem传输协议: ZModem is a full-duplex file transfer protocol that supports fast data transfer rates and effective error detection. ...
分类:Web程序   时间:2020-02-13 20:51:38    阅读次数:636
ubuntu环境变量
ubuntu环境变量 查看环境变量:命令行运行 echo $PATH 与环境变量有关的文件(参考的网上大佬们的文章) /etc/profile:在登录时,操作系统定制用户环境时使用的第一个文件,此文件为系统的每个用户设置环境信息,当用户第一次登录时,该文件被执行。 /etc/environment: ...
分类:系统相关   时间:2020-02-13 20:50:55    阅读次数:70
Docker中运行mysql
一.下载镜像 docker pull mysql:5.7 二.使用镜像创建容器 docker run --name HTMysql -p 8088:3306 -e MYSQL_ROOT_PASSWORD=root -d mysql:5.7 #--name 设置容器的名称 #-p 设置端口映射 #-e ...
分类:数据库   时间:2020-02-13 20:50:35    阅读次数:83
4、读写分离---双主双从(mycat)
双主双从 一个主机 m1 用于处理所有写请求,它的从机 s1 和另一台主机 m2 还有它的从机 s2 负责所有读请 求。当 m1 主机宕机后,m2 主机负责写请求,m1、m2 互为备机。 角色 地址 master1 192.168.199.231 slave1 192.168.199.185 mas ...
分类:其他好文   时间:2020-02-13 20:50:13    阅读次数:88
20200213springboot日记
恢复内容开始 恢复内容开始 恢复内容开始 数据库管理 Lombok插件 少写getter setter string等方法 Assert.assertNotEquals(0,result.size()); 不期望是0,期望是result.size(); ProductCategory product ...
分类:编程语言   时间:2020-02-13 20:49:56    阅读次数:72
节点和节点结构
...
分类:其他好文   时间:2020-02-13 20:49:08    阅读次数:48
Vue项目在pycharm中配置
pycharm配置并启动vue项目 第一步 用pycharm打开vue项目的根目录 第二步 安装vue.js插件来高亮 .vue 文件代码(见插图) 第三步 第四步 配置npm启动服务启动vue项目(见插图) 第五步 ...
分类:其他好文   时间:2020-02-13 20:48:43    阅读次数:311
Vsan分布式存储服务器数据恢复过程介绍
一、vsan分布式存储故障情况介绍近期处理了一个vsan分布式存储的数据恢复案例,需要进行数据恢复的服务器是一套vsan超融合基础架构。由于客户的服务器供电异常导致异常关机,服务器管理员对服务器进行了重启,重启后发现vsan存储逻辑架构出现故障,虚拟磁盘文件丢失,虚拟机组件异常。客户的vsan存储服务器里面一共搭配了16块硬盘,其中固态硬盘有8块,机械硬盘8块。固态硬盘主要作为缓存盘使用。#二、v
分类:其他好文   时间:2020-02-13 20:48:09    阅读次数:72
(转)Python与Excel交互——Xlwings
Xlwings是我认为的Python最强大的处理Excel的库,主要原因如下: 1 Windows,Mac都能用 (Excel,WPS也都能用) 2 功能齐全,支持Excel的新建、打开、修改、保存(pandas和xlsxwriter去不能全做到) 3 语法简单(用过一次后我就记住了) 4 可以调用 ...
分类:编程语言   时间:2020-02-13 20:47:45    阅读次数:156
JVM探秘:VisualVM监控远程Java进程
VisualVM在Java 8中是JDK自带的一个图形化工具,项目主页 "VisualVM" ,在后续版本中可能会从JDK移除。 VisualVM可以监控Java进程的CPU与内存占用情况,可以监控Java进程内的各个线程的执行情况,还可以与MAT工具一样用来分析堆转储快照。 监控远程Tomcat进 ...
分类:编程语言   时间:2020-02-13 20:46:43    阅读次数:80
21. Merge Two Sorted Lists
Merge two sorted linked lists and return it as a new list. The new list should be made by splicing together the nodes of the first two lists. Example: ...
分类:其他好文   时间:2020-02-13 20:46:21    阅读次数:72
SpringBoot+Thymeleaf+LayUI
后端框架 后端框架 SpringBoot Mybatis 前端框架 Thymeleaf LayUI JQuery 数据库 MySQL 开发必备技术 熟悉SpringMVC框架 熟悉SpringBoot框架 熟悉Mybatis框架 了解Thymeleaf模板 了解LayUI框架 熟悉JQuery 熟悉 ...
分类:编程语言   时间:2020-02-13 20:46:04    阅读次数:331
1089条   上一页 1 ... 11 12 13 14 15 16 17 ... 65 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!