说起网络爬虫,大家想起的估计都是 Python ,诚然爬虫已经是 Python 的代名词之一,相比 Java 来说就要逊色不少。有不少人都不知道 Java 可以做网络爬虫,其实 Java 也能做网络爬虫而且还能做的非常好,在开源社区中有不少优秀的 Java 网络爬虫框架,例如 webmagic 。我 ...
分类:
编程语言 时间:
2019-10-04 11:30:59
阅读次数:
91
# 前言 开源社区有好多优秀的队列中间件,比如RabbitMQ和Kafka,每个队列都貌似有其特性,在进行工程选择时,往往眼花缭乱,不知所措。对于RabbitMQ和Kafka,到底应该选哪个? # RabbitMQ架构 ## 概念 RabbitMQ是一个分布式系统 **broker**:每个节点运行 ...
分类:
其他好文 时间:
2019-10-03 16:33:10
阅读次数:
96
1. 贡献代码: 贡献代码,通俗的说,就是自己修改了代码,希望合并到别人的Repository(仓库)中。将自己的智慧贡献给开源社区。下面将详细讲解步骤 1.1 第一步:fork 在GitHub社区闲逛时,看中了某个项目代码,如:spring-projects/spring-framework,点击 ...
分类:
其他好文 时间:
2019-09-27 18:54:53
阅读次数:
83
.NET 走向开源,MIT许可协议。 微软为了推动.NET开源社区的发展,2014年联合社区成立了.NET基金会。.NET基金会是一个独立的组织,支持.NET社区和开源,旨在拓宽和加强.NET生态系统和社区。这可以通过多种方式完成,包括项目指导,指导,法律和营销帮助,技术和财务支持设置等. 2014... ...
分类:
Web程序 时间:
2019-09-26 09:31:29
阅读次数:
95
Git 相关 代码提交规范 关于 Git 的 commit, 描述信息务必要准确描述这次代码改动所做的事情。 在此基础之上,提交代码时应遵守以下写法, 这也是开源社区较为推崇的一种写法, 最早从 Angular 社区传播开来. 格式为 `<type>(<scope>): <subject>`, 例如 ...
分类:
其他好文 时间:
2019-09-23 12:24:15
阅读次数:
113
最近接触了下组内常用的一些日志分析及报警工具,发现现在一些开源社区和商业公司的产品真的很好用,想要独立搭建一个完善的后端服务,真的已经很容易了; 1. 日志收集与分析:graylog2 + hive/presto 2. 服务监控:sentry 3. Rpc: thrift+consul 如今的开发环 ...
分类:
其他好文 时间:
2019-09-22 12:59:42
阅读次数:
93
centos7使用的MariaDB,替代了早期版本默认的MySQL。MariaDB是MySQL的一个分支,由开源社区维护,采用GPL授权许可,且MariaDB完全贱人MySQL。检查centos7下现有的MariaDB安装包:删除MariaDB安装包:[hadoop@hadoop01 ~]$ su ...
分类:
数据库 时间:
2019-09-18 00:56:29
阅读次数:
156
在网络应用开发的过程中,直接使用JDK提供的NIO的API,比较繁琐,而且想要进行性能提升,还需要结合多线程技术。 由于网络编程本身的复杂性,以及JDK API开发的使用难度较高,所以在开源社区中,涌现出来了很多对JDK NIO进行封装、增强的网络编程框架,比如Netty、Mina等。 一、Nett ...
分类:
编程语言 时间:
2019-09-16 16:22:36
阅读次数:
122
一.mariadb的安装 MariaDB数据库管理系统是MySQL的一个分支,主要由开源社区在维护,采用GPL授权许可。 开发这个分支的原因之一是:甲骨文公司收购了MySQL后,有将MySQL闭源的潜在风险,因此社区采用分支的方式来避开这个风险。 MariaDB的目的是完全兼容MySQL,包括API ...
分类:
数据库 时间:
2019-09-14 13:42:10
阅读次数:
142
近日,微众银行联邦学习FATE开源社区迎来了两位新贡献者——来自腾讯的刘洋及秦姝琦,作为云计算安全领域的专家,两位为FATE构造了新的功能点,并在Github上提交修复了相关漏洞。(Github项目地址:https://github.com/FederatedAI/FATE )从FATE的面世,到贡 ...
分类:
其他好文 时间:
2019-09-12 23:19:53
阅读次数:
210