scrapy中selenium的应用 引入 在通过scrapy框架进行某些网站数据爬取的时候，往往会碰到页面动态数据加载的情况发生，如果直接使用scrapy对其url发请求，是绝对获取不到那部分动态加载出来的数据值。但是通过观察我们会发现，通过浏览器进行url请求发送则会加载出对应的动态加载出的数据 ...
分类：
其他好文 时间：
2020-03-16 12:40:59
阅读次数：
51
Sentinel概述： 随着微服务的流行，服务和服务之间的稳定性变得越来越重要。 Sentinel 以流量为切入点，从流量控制、熔断降级、系统负载保护等多个维度保护服务的稳定性。 Sentinel 具有以下特征: 丰富的应用场景 ：Sentinel 承接了阿里巴巴近 10 年的双十一大促流量的核心场 ...
分类：
其他好文 时间：
2020-03-16 09:49:33
阅读次数：
296
一、动态HTML 1.爬虫跟反爬虫 2.动态HTML连载 （1）JavaScript （2）jQuery （3）Ajax （4）DHTML （5）Python采集动态数据 从JavaScript代码入手采集?；Python第三方库运行JavaScript，直接采集你在浏览器中看到的页面 二、Sele ...
分类：
编程语言 时间：
2020-03-14 01:10:07
阅读次数：
74
大数据营销是指通过互联网采集大量的行为数据，首先帮助广告主找出目标受众，以此对广告投放的内容、时间、形式等进行预判与调配，并最终完成广告投放的营销过程。互联网时代的到来是一个全新的变革，网民数量不断增加，网络信息资源飞速上涨，处于大数据时代的企业想要发展自己，肯定要学会信息采集并准确分析数据。想要在门户网站获取有用的信息，会是很大的一个难题。其实仔细观察我们不难发现，国内大多数门户网站信息量都很大
分类：
其他好文 时间：
2020-03-11 12:42:32
阅读次数：
45
传送门：http://poj.org/problem?id=1958 汉诺塔：https://www.cnblogs.com/antineutrino/p/3334540.html 问题引入：这个在标准的三塔问题上又加了一维，我们先考虑三个塔是怎么计算的？可以具体地分成三个步骤： 1.假设A塔上有n ...
分类：
其他好文 时间：
2020-03-01 12:42:22
阅读次数：
63
HTML中，PDF版报告的展示和下载 相关搜索：脚本编辑器；$scope.r_g_company.reportPage；文件上传中... 1、展示，在HTML中，划定一个区域，用做PDF版报告的展示 （1）封面内容：一个单独的HTML，内有动态数据插入 （2）展示内容：另一个单独的HTML，内有动态 ...
分类：
Web程序 时间：
2020-03-01 00:05:02
阅读次数：
77
今天学习了关于页面导航数据传递的知识，它可以有三种方法，前两种比较适合传递静态数据，最后一种则是复杂的动态数据传递。下面我来一次说一下三种方法： 第一种：打开新建navigation文件夹中的xml的图形界面。 在图形界面中点击一个界面，然后右边的Arguments是参数的意思，点击加号就可以创建参 ...
分类：
移动开发 时间：
2020-02-15 13:25:19
阅读次数：
108
JSP 1、JSP简介 Java Server Pages:Java服务器端页面，也和Servlet一样，用于动态Web技术 最大的特点： 写JSP就像在写HTML 区别： HTML只给用户提供静态的数据 JSP页面中可以嵌入Java代码，为用户提供动态数据； 2、JSP的原理 我们来看看JSP到底 ...
分类：
编程语言 时间：
2020-02-12 20:29:46
阅读次数：
88
动态数据生成的手风琴，collapseVal初始化时直接设置开展面板值（不会自动展开第一个面板）：collapseVal: ["0"], // 手风琴 解决： 使用手风琴组件代码： <!-- 手风琴 ，name可以不设置，默认是索引值 --> <Collapse class="ivu-collaps ...
分类：
其他好文 时间：
2020-02-12 12:35:13
阅读次数：
486
saltstack介绍1、saltstack是使用python语言开发的；2、轻量级的管理工具，批量执行命令；3、常用模块：pkg（包）、file（文件）、cmd（执行命令或脚本）、user、service、cron4、saltstack数据系统Grains（静态数据）pillar（动态数据）saltstack三大功能，远程执行，配置管理，云管理SaltStack是一个服务器基础架构集中化管理平台
分类：
Web程序 时间：
2020-02-10 09:46:41
阅读次数：
75
