最近在研究kafka,看了一堆理论的东西,想动手实践一些东西,奈何手上的数据比较少,突发奇想就打算写个爬虫去抓一些数据来玩,顺便把深入一下爬虫技术。 之前写过一些小爬虫,一般就是用python的requests+lxml来爬取数据。这次打算学一下python的scrapy框架来爬取数据。解析网页内容 ...
分类:
其他好文 时间:
2020-03-05 13:19:59
阅读次数:
76
(请观看本人博文—— "《详解 I/O流》" ) RandomAccessFile 类 (随机访问流) 概述: RandomAccessFile 类 的实例支持对随机访问文件的 读取和写入 。 随机访问文件的行为类似存储在文件系统中的一个大型 byte 数组。 存在指向该隐含数组的光标或索引,称为文 ...
分类:
其他好文 时间:
2020-03-05 10:35:50
阅读次数:
70
ylbtech-汉语-词语:眼界 眼界,指目力所及的范围。引申指见识的广度。 眼界广者其成就必大,眼界狭者其作为必小。语出唐 王维 《青龙寺昙壁上人兄院集》诗:“眼界今无染,心空安可迷。” 苏辙(子由)《和子瞻雪浪斋》:“窗中缟练舒眼界,枕上雷霆惊耳门。”等。 1.返回顶部 2.返回顶部 3.返回顶 ...
分类:
其他好文 时间:
2020-03-04 17:39:34
阅读次数:
134
import XLSX from "xlsx-style" //ps 需要修改源码:在\node_modules\xlsx-style\dist\cpexcel.js 807行 的 var cpt = require(’./cpt’ + ‘able’); 改成 var cpt = cptable 不 ...
分类:
其他好文 时间:
2020-03-04 14:53:12
阅读次数:
109
MySQL 序列使用 MySQL 序列是一组整数:1, 2, 3, ...,由于一张数据表只能有一个字段自增主键, 如果你想实现其他字段也实现自动增加,就可以使用MySQL序列来实现。 本章我们将介绍如何使用MySQL的序列。 使用 AUTO_INCREMENT MySQL 中最简单使用序列的方法就 ...
分类:
数据库 时间:
2020-03-04 09:44:59
阅读次数:
62
Data.cs文件 144行改成 //2015-06-29 错误是没有签名 if(m_values["return_code"].ToString().ToUpper() != "SUCCESS") 278行改成 //获取接收到的签名 string return_sign = GetValue("s ...
分类:
微信 时间:
2020-03-04 09:16:34
阅读次数:
106
一、对象 Redis使用对象来表示数据库中的键和值,每次当我们在redis的数据库中新创建一个键值对时,我们至少会创建两个对象,一个键对象,一个值对象。 Redis中的每个对象都由一个redisObject结构表示。 typedef struct redisObject { // 对象类型 unsi ...
分类:
其他好文 时间:
2020-03-02 22:28:55
阅读次数:
67
这个是我遇到的问题,一开始我以为是我的ssh公钥失效了,为了验证这一想法,我反复的将公钥创建 了N次,却依旧无法解决问题。于是,我就开始怀疑自己是否某些关键性的配置配置错误,或者粗心导致的,反复检查后发现自己没有问题。ok,下面是解决的办法: 在你的ternimal下执行该命令 ssh-agent ...
分类:
其他好文 时间:
2020-03-02 21:07:53
阅读次数:
74
在一棵树中,一条链及与它直接相连的所有边的集合称作一个毛毛虫,这个子图中的点数称作这个毛毛虫的大小。求一棵树中最大的毛毛虫。$N\leq 3\times10^5$ Solution 设每个点的权值为 $deg_i 1$,然后求最长路即可,答案就是 $ans+2$ ...
分类:
其他好文 时间:
2020-03-02 14:47:41
阅读次数:
56