pyspider是好东西,非常稳定,很久很久以前架了一个,心冷了一段时间,但人家尽忠职守地持续运行,一直在抓取东西。 结合chrome,抓取代码简直不要太好写,没想到,最头大的,还是它的调度。明明感觉没问题的,就是不运行。在这个上面花的时间,比页面解析的要多。所以,把近期的学习心得记录下来: 第一、... ...
分类:
其他好文 时间:
2019-10-06 09:42:07
阅读次数:
76
个人心得 写博客真的比写代码累,膜拜那些坚持写博客的大佬! 有时候零散的片段比较多,没写之前感觉有千千万万要写的东西,实际写的时候发现, 好像这个没啥说的,然后就帖了个图,或者一笔带过了 待改进&交流 使用消息队列替换目前的api调用形式,同时消息队列支持定义推送优先级 使用polly来重试失败的调 ...
分类:
Web程序 时间:
2019-10-06 09:27:40
阅读次数:
75
## 个人心得 写博客真的比写代码累,膜拜那些坚持写博客的大佬! 有时候零散的片段比较多,没写之前感觉有千千万万要写的东西,实际写的时候发现, 好像这个没啥说的,然后就帖了个图,或者一笔带过了 ## 待改进&交流 - 使用消息队列替换目前的api调用形式,同时消息队列支持定义推送优先级 - 使用po ...
分类:
Web程序 时间:
2019-10-06 00:15:29
阅读次数:
109
学术研究的一些心得体会 当我们开始高校研究生活时,我们就踏上了学术研究之路。这是一条探索未知世界,追求知识真理之路。这条道路上布满荆棘,充满了冒险和乐趣。本文通过分享自己在博士学习阶段亲身经历的研究经验和体会(主要涉及到文献检索、文献阅读、实验设计和论文写作这四个方面),希望能帮助一些入门研究不久的 ...
分类:
其他好文 时间:
2019-10-05 10:33:12
阅读次数:
179
一、绪论 【因为这篇心得是原创的,所以如果有哪处总结或者意见不足的地方,欢迎各位大神的批评和意见,共同学习,谢谢了!】 早些时候,需要在centos6.4系统中配置单机版和集群版单节点的hadoop HDFS,由于那时候一边跟老师学hadoop一边自学Linux。初学的自己懂得也不多,别人都用普通用 ...
分类:
其他好文 时间:
2019-10-04 22:41:23
阅读次数:
199
前言 最近公司做项目的时候正好使用到phaser,在这里做一下自己整理出来的一些心得,方便大家参考,phaser这一个游戏引擎通常是做2d游戏的,入门也非常简单,只需你会一点的javascript,但是你想做一个比较完美的游戏的话,那么光靠一点点的javascript是远远不够的,本篇博客将快速带你 ...
分类:
其他好文 时间:
2019-10-04 16:39:37
阅读次数:
203
CERN ROOT程序是使用技巧记录: g++ -o filename.exe test.cxx `root-config --cflags --libs` g++ -fopenmp -o filename.exe test.cxx `root-config --cflags --libs` //多 ...
分类:
其他好文 时间:
2019-10-03 16:06:14
阅读次数:
939
一个绘图脚本Draw.c(从TTree中读取数据,根据Cut条件画图) ...
分类:
其他好文 时间:
2019-10-03 15:57:27
阅读次数:
170
每天码代码打卡任务,老师需要我们提交链接,这就需要我们把自己打的代码文件上传到GitHub上来,以此获得链接。 自己是一个新人,安装git也是什么都不懂(跟着网上的教程也总是能出错) 安装正常操作:https://www.cnblogs.com/sdcs/p/8270029.html 然而第一次安装 ...
分类:
其他好文 时间:
2019-10-01 20:56:31
阅读次数:
93
以前装Hadoop-3.1.2是跟着厦大林子雨的详细教程装的,所以遇到的问题不多,自己没怎么思考,导致跟着官网再装了一个Hadoop-2.9.2(为了装Hbase2.2.0)时装了两天,现在把遇到过的问题记下来以免以后再犯。 首先,安装软件首先看官网教程。但官网的教程是很简单的,比如Hadoop的安 ...
分类:
其他好文 时间:
2019-10-01 10:11:05
阅读次数:
472