1.最好支持TCP、HTTP两种通讯协议。即使不支持也可以扩展,或者集成两种RPC组件。 2.最好支持异步、同步两种调用方式。 3.性能要尽可能的好。 4.通讯层最好要有失败重试的机制或者类似的补偿机制。 5..net技术路线。 经过筛选,大致确定了2个组件:Thrift、gRPc ...
分类:
Web程序 时间:
2018-06-16 13:21:18
阅读次数:
176
一,程序的功能和适用人群 程序的功能是爬取豆瓣用户标记的想读的图书,将图书信息保存为excel文件。适用于想备份在豆瓣上标记的图书的用户。 二,执行效果 程序执行后会得到一个excel文件,保存了用户想要读的图书信息,如下图: 三,技术路线 技术路线是选取用户在豆瓣上标记的想读的图书的首页url作为 ...
分类:
其他好文 时间:
2018-06-09 20:32:12
阅读次数:
332
1、不会做题,就不会写程序。 数据结构 -Java慕课 程序设计与算法-LeedCode+北京大学 2、不会Java知识,框架知识,容易写很多错误冗余的程序 Java基础巩固 Java多线程-并发编程的艺术/并发与高并发课 Java框架-架构探险 Effective Java 3、了解一下互联网的架 ...
分类:
其他好文 时间:
2018-06-09 10:13:40
阅读次数:
136
功能描述: 目标:获取上交所和深交所所有股票的名称和交易信息 输出:保存到文件中 技术路线:requests-bs4-re 候选数据网站的选择: 新浪股票:http://finance.sina.com.cn/stock/ 百度股票:https://gupiao.baidu.com/stock/ 候 ...
分类:
其他好文 时间:
2018-06-03 19:48:23
阅读次数:
229
功能描述: 输入:大学排名URL链接:http://www.zuihaodaxue.cn/zuihaodaxuepaiming2016.html 输出:大学排名信息的屏幕输出(排名,大学名称,总分) 技术路线:requests-bs4 定向爬虫:仅对输入的URL链接进行爬取,不扩展爬取。 程序的程序 ...
分类:
其他好文 时间:
2018-06-03 17:30:30
阅读次数:
274
股票信息定向爬取 功能描述: 目标 获取上交所和深交所所有股票的名称和交易信息 输出 保存在文件中 技术路线 requests bs4 re 候选爬取网站: 新浪股票 http://finance.sina.com.cn/stock/ 百度股票 https://gupiao.baidu.com/st ...
分类:
其他好文 时间:
2018-05-02 02:54:22
阅读次数:
142
截止到今天,我已经工作好几年了,再工作几年就10年了,已不再是当年大一时信誓旦旦说未来我想做一名工程师的小姑娘了。。 摆在我面前向上发展有多条路: 走技术路线成为架构师,CTO 走管理路线成为管理者 但是不管未来走哪一条路,当看到以下<我为什么离开管理岗位?>这片文章 都告诫我们:在IT界,不管是管 ...
分类:
其他好文 时间:
2018-04-20 18:53:00
阅读次数:
179
最好大学网 2018大学排名 功能描述: 输入:大学排名url链接 输出:大学排名信息的屏幕输出(排名,大学名称,总分) 技术路线:requests库和bs4库 定向爬虫:仅对输入的URL进行爬取,不扩展爬取 步骤: 1、输入url网址,查看源代码,发现信息都在HTML文件中 2、打开http:// ...
分类:
其他好文 时间:
2018-03-29 22:43:53
阅读次数:
398
最近微软在技术上连续有大动作,在PDC上发布了Windows Azure云计算平台,预告了Visual Studio 2010、.NET 4.0和C# 4.0。如果放在几年前,我相信微软粉丝们一定是欢声雷动,不过这次情况有点不太一样,在网上看到有人在抱怨微软技术更新速度太快而且四面出击,还有人扬言要 ...
分类:
其他好文 时间:
2018-03-02 17:20:47
阅读次数:
137
功能描述 目标:获取上交所和深交所所有股票的名称和交易信息 输出:保存到文件中 技术路线:requests+bs4+re 数据网站的选择 新浪股票:http://finance.sina.com.cn/stock/ 百度股票:https://gupiao.baidu.com/stock/ 选取原则: ...
分类:
其他好文 时间:
2018-01-19 13:57:23
阅读次数:
180