研究大数据和数据挖掘的都知道,并行化算法研究是大数据领域一个较为重要的研究热点。近年来国内外开始关注在 Spark 平台上如何实现各种机器学习和数据挖掘并行化算法设计。Spark 提供了大量的库,包括SQL、DataFrames、MLlib、GraphX、Spark Streaming。 开发者可以 ...
分类:
其他好文 时间:
2019-04-20 09:58:04
阅读次数:
139
原文摘选自 现代OpenGL渲染管线介绍 此文对最新的OpenGL做一个简单的介绍,如有理解错误,敬请指正。英文原文: https://glumpy.github.io/modern-gl.html opengl已经发展了很多年,自从2003年后提出dynamic pipeline(OpenGL 2 ...
分类:
其他好文 时间:
2019-04-18 16:43:44
阅读次数:
177
除将爬取到的信息写入文件中之外,程序也可通过修改 Pipeline 文件将数据保存到数据库中。为了使用数据库来保存爬取到的信息,在 MySQL 的 python 数据库中执行如下 SQL 语句来创建 job_inf 数据表: 然后将 Pipeline 文件改为如下形式,即可将爬取到的信息保存到 My ...
分类:
数据库 时间:
2019-04-17 23:18:18
阅读次数:
211
一.爬虫 二. item 3.pipeline 4.settings ...
分类:
其他好文 时间:
2019-04-17 00:08:54
阅读次数:
133
原文:基于Jenkins Pipeline的ASP.NET Core持续集成实践最近在公司实践持续集成,使用到了Jenkins的Pipeline来提高团队基于ASP.NET Core API服务的集成与部署,因此这里总结一下。 一、关于持续集成与Jenkins Pipeline 1.1 持续集成相关... ...
分类:
Web程序 时间:
2019-04-15 23:34:07
阅读次数:
594
写程序主要是为了以后自己读起来不费劲,方便查看和维护。//返回错误的约定:如果该命令与本站有关则根据设定来决定是否返回错误信息,//如果该命令与本站无关则不必返回错误信息,接收的全部是16进制的数字boolInspect=true;uint8_tErrorCode=0;//CRC检查......//分析文件头if(rx_buffer1[0]!=0x59||rx_buffer1[1]!=0x51
分类:
其他好文 时间:
2019-04-10 10:38:48
阅读次数:
163
在Jenkinspipeline的groovy脚本中可以实现很多复杂灵活的功能,但是:1一来对java、groovy不是很熟,也不知道能不能引入一些三方库?比如搞个jdbc操作下mysql什么的。2二是自己对go和python比较熟悉,所以想能够更加灵活的实现更多的功能:比如:操作数据库,无需依赖构建宿主机必须有数据库client来靠shell操作数据库。操作gitlab,比如参数化构建,传递进来
分类:
编程语言 时间:
2019-04-09 10:54:43
阅读次数:
445
开始之前,我们要确认一下 Plugin 的 pipeline. PreValidation -> PreOperation -> Server Side System Main Event-> PostOperation PreValidation 是在security check 之前, 通常会用 ...
分类:
其他好文 时间:
2019-04-08 23:02:16
阅读次数:
276
"原文链接" rsync是一个快速、多功能的远程(和本地)文件拷贝工具。 摘要 当仅有一个SRC或DEST参数时将列出源文件列表而不是复制文件。 描述 Rsync是一个快速且功能非常丰富的文件拷贝工具。它可以在本地和远程之间通过shell或rsync服务互相拷贝文件。它提供了大量的选项来控制它各方面 ...
分类:
其他好文 时间:
2019-04-04 10:06:47
阅读次数:
190
CVV canonical view volume HCS homogeneous clip space NDC nomolized device coordinates pipeline 的 geometry stage 的 projection前后有这样一些概念 次序 以及什么时候做了什么 哪里 ...
分类:
其他好文 时间:
2019-03-23 10:20:21
阅读次数:
285