Node.js创建第一个应用 参考自https://www.runoob.com/nodejs/nodejs-http-server.html 一个Node.js应用的基本组成 引入required模块(必要的模块):使用require指令来载入相关的Node.js模块 创建服务器:用来监听客户端的 ...
分类:
Web程序 时间:
2020-12-30 11:12:56
阅读次数:
0
一,开篇分析 NodeJS的开发语言是JavaScript,JavaScript语言自身只有字符串数据类型,没有二进制数据类型。NodeJS有时会进行网络传输、文件操作、图片处理等操作,而这些操作都与二进制数据紧密相关。因此,NodeJS提供了一个与String对等的全局构造函数Buffer来提供对 ...
分类:
Web程序 时间:
2020-12-30 10:58:05
阅读次数:
0
可以看出途家做了极多的反爬措施,无论是假数据、js加密,还是各种极高耦合性的加密参数,还是IP或者登陆校验,以至于现在取消了PC网页端的情况,但目前来看都不是很难攻克。 ...
分类:
其他好文 时间:
2020-12-30 10:46:22
阅读次数:
0
简介 Scrapy是爬取网站,提取结构性数据并存储的应用框架。对爬取过程中的请求、返回、解析、存储、调度等流程提供模块化支持。 items模块——定义需要爬取的数据字段 保存爬取到的数据的容器,python的字典类型。根据网站数据对item进行定义字段。 # items示例 import scrap ...
分类:
其他好文 时间:
2020-12-29 11:43:51
阅读次数:
0
How to parse command line arguments Passing in arguments via the command line is an extremely basic programming task, and a necessity for anyone tryin ...
分类:
Web程序 时间:
2020-12-29 11:32:27
阅读次数:
0
最近收到业务需求,了解puppeteer,做自动化登录,获取cookie值 首先自己得澄清一下,之前对于puppeteer是个什么玩意完全不知道,百度一下出来的题目都是爬虫利器,详细了解了之后才发现主要有一下几个功能会经常用到puppeteer库: 1.生成页面PDF 2.做自动化测试(所谓的自动化 ...
分类:
其他好文 时间:
2020-12-29 11:13:37
阅读次数:
0
一、Scrapy的简介 Scrapy 是基于twisted框架开发而来,twisted是一个流行的事件驱动的python网络框架。因此Scrapy使用了一种非阻塞(又名异步)的代码来实现并发。整体架构大致如下 它主要由五大组件和两中间件组成: 五大组件: 1、引擎(ENGINE):用来处理整个系统的 ...
分类:
其他好文 时间:
2020-12-29 11:11:00
阅读次数:
0
关于文件流本人了解不多,暂时先学会用法,理解作用是什么,以后有成长了再重来 nodejs文件模块-文件流:(我认为文件流相当于懒加载,如同网页内容的一些大图,或者是长文本,是一次性加载完毕随后展示;流式相当于一次性加载一部分,分多次加载。) -- 以流的方式读取文件: 具体用法: 1 var rea ...
分类:
其他好文 时间:
2020-12-28 11:45:06
阅读次数:
0
1. 安装依赖 npm install baidu-aip-sdk 2.创建AipOcrClient 注:需要到百度api创建应用,拿到所需的APPID/AK/SK https://console.bce.baidu.com/ai/?_=1608602031624#/ai/ocr/app/list ...
分类:
Web程序 时间:
2020-12-28 11:24:41
阅读次数:
0
JavaWeb (了解底层原理,面试用) Web页面可以动态更新;所有用户看到都不是同一个页面;与数据库交互(持久化) PHP PHP开发速度快、功能强大、跨平台、代码简单(中小企业很多用这个) 无法承载三高(高并发、高可用、高性能) Web服务器 ——Tomcat Tomcat服务器(属于Apac ...
分类:
编程语言 时间:
2020-12-28 11:16:02
阅读次数:
0