码迷,mamicode.com
首页 >  
搜索关键字:pipeline    ( 288个结果
Spark SQL下的Parquet使用最佳实践和代码实战
一:Spark SQL下的Parquet使用最佳实践 1,过去整个业界对大数据的分析的技术栈的Pipeline一般分为一下两种方式: A)Data Source -> HDFS -> MR/Hive/Spark(相当于ETL) -> HDFS Parquet -> SparkSQL/impala - ...
分类:数据库   时间:2017-01-20 16:21:10    阅读次数:13
MVC源码解析 - Http Pipeline 解析(下)
接上一篇, 我在 HttpModule 的Init方法中, 添加了自己的事件, 在Pipeline里, 就会把握注册的事件给执行了. 那么Pipeline是如何执行并且按照什么顺序执行的呢? 现在我们重新回到HttpApplication.InitInternal()方法中来. 注: Integra ...
分类:Web程序   时间:2017-01-12 09:32:31    阅读次数:9
MVC源码解析 - 配置注册 / 动态注册 HttpModule
本来这一篇, 是要继续 Pipeline 的, 但是在 Pipeline之前, 我看到了InitModules()方法, 所以决定, 在中间穿插一篇进来. 这一篇来讲一下 IHttpModule 的加载时机, 以及怎么动态注册 HttpModules. 一. 经典模式下的 InitModules 方 ...
分类:Web程序   时间:2017-01-12 09:18:55    阅读次数:14
【微服务那些事】Microservices场景下的持续部署
近两年作者在海外交付中参与 microservices 下的团队,为客户提升 Finance 系统的扩展性。作者所在团队,3 对开发(pair programming, 2 个 dev 为 pair)为客户支撑着 11 个 services,持续部署流水线(CD pipeline)是其中必不可少的一 ...
分类:其他好文   时间:2017-01-11 16:46:34    阅读次数:25
005-IIS处理过程
PipeLine调用过程ISAPIRuntime ProcessReqeustHttpRuntime ProcessRequestNoDemand ProcessRequestNow ProcessRequestInternal 封装上下文 通过对象工厂获取application对象HttpAppl ...
分类:其他好文   时间:2017-01-10 23:46:44    阅读次数:21
Mongodb聚合
1>、聚合框架:使用聚合框架可以对集合中的文档进行变换和组合。基本上,可以用多个构件创建一个管道(pipeline),用于对一连串的文档进行处理。这些构件包括筛选(filtering)、投射(projecting)、分组(grouping)、排序(sorting)、限制(limiting)和跳过(s ...
分类:数据库   时间:2017-01-10 12:58:38    阅读次数:15
Biztalk 2013 R2 完整应用开发实验
BizTalk开发综合实验1课程简介通过本课程熟悉BizTalk开发组件Schema/Map/Orchestration/Pipeline的开发与配置2准备工作3演示3.1创建与配置BizTalk应用程序1.打开VisualStudio,新建BizTalk应用程序2.修改部署配置3.创建应用程序签名3.2创建输入消息Schema新建Schema新建两节点F..
分类:其他好文   时间:2017-01-09 00:57:34    阅读次数:28
使用管道(PipeLine)和批量(Batch)操作
使用管道(PipeLine)和批量(Batch)操作 前段时间在做用户画像的时候,遇到了这样的一个问题,记录某一个商品的用户购买群,刚好这种需求就可以用到Redis中的Set,key作为productID,value 就是具体的customerid集合,后续的话,我就可以通过productid来查看 ...
分类:其他好文   时间:2016-12-30 15:37:57    阅读次数:11
play 源码分析
1、实例化ServerBootstrap 启动netty服务器(boss线程池、worker线程池),绑定IP、端口 2、指定filter ,也就是PLAY中的HttpServerPipelineFactory,用于处理输入和输出报文 //处理httprequest pipeline.addLast ...
分类:其他好文   时间:2016-12-28 09:43:34    阅读次数:9
持续集成+自动化部署[代码流水线管理及Jenkins和gitlab集成]
持续集成+自动化部署[代码流水线管理及Jenkins和gitlab集成]标签(空格分隔): Jenkins一、代码流水线管理  Pipeline名词顾名思义就是流水线的意思,因为公司可能会有很多项目。...
分类:其他好文   时间:2016-12-23 23:09:41    阅读次数:26
288条   1 2 3 4 ... 29 下一页
© 2014 mamicode.com 版权所有 京ICP备13008772号-2
迷上了代码!