鲁春利的工作笔记，好记性不如烂笔头http://shiro.apache.org/web-features.html基于Basic的拦截器身份验证shiro-authc-basic.ini#基于Basic的拦截器身份验证
[main]
#默认是/login.jsp
authc.loginUrl=/login
authcBasic.applicationName=请登录
[users]
#用户名=密码，角色
..
分类：
Web程序 时间：
2016-07-31 22:28:38
阅读次数：
250
鲁春利的工作笔记，好记性不如烂笔头http://shiro.apache.org/web-features.html前面的示例都是把用户名或密码以及权限信息放在ini文件中，但实际的Web项目开发过程中，实际上一般是user<--->role、role<-->permission进行关联关系的配置，每次登录时加载其拥有的..
分类：
数据库 时间：
2016-07-31 22:23:54
阅读次数：
255
Shark是构建在Spark和Hive基础之上的数据仓库。 目前，Shark已经完成学术使命，终止开发，但其架构和原理仍具有借鉴意义。 它提供了能够查询Hive中所存储数据的一套SQL接口，兼容现有的Hive QL语法。 这样，熟悉Hive QL或者SQL的用户可以基于Shark进行快速的Ad-Ho ...
分类：
Web程序 时间：
2016-07-31 22:15:56
阅读次数：
1064
Spark SQL提供在大数据上的SQL查询功能，类似于Shark在整个生态系统的角色，它们可以统称为SQL on Spark。 之前，Shark的查询编译和优化器依赖于Hive，使得Shark不得不维护一套Hive分支，而Spark SQL使用Catalyst做查询解析和优化器，并在底层使用Spa ...
分类：
数据库 时间：
2016-07-31 22:15:32
阅读次数：
226
首先，关于spark算子的分类，详细见http://www.cnblogs.com/zlslch/p/5723857.html 1、Transformation 变换/转换算子 1、map算子 2、flatMap算子 3、mapPartitions算子 4、union算子 5、cartesian算子 ...
分类：
Web程序 时间：
2016-07-31 22:13:45
阅读次数：
311
BlinkDB是一个用于在海量数据上进行交互式SQL的近似查询引擎。 它允许用户通过在查询准确性和查询响应时间之间做出权衡，完成近似查询。 其数据的精度被控制在允许的误差范围内。 为了达到这个目标，BlinkDB的核心思想是：通过一个自适应优化框架，随着时间的推移，从原始数据建立并维护一组多维样本； ...
分类：
数据库 时间：
2016-07-31 22:10:41
阅读次数：
822
Spark 算子大致可以分为以下两类: 1）Transformation 变换/转换算子：这种变换并不触发提交作业，完成作业中间过程处理。 Transformation 操作是延迟计算的，也就是说从一个RDD 转换生成另一个 RDD 的转换操作不是马上执行，需要等到有 Action 操作的时候才会真 ...
分类：
Web程序 时间：
2016-07-31 21:59:35
阅读次数：
1482
RDD的创建 两种方式来创建RDD： 1）由一个已经存在的Scala集合创建 2）由外部存储系统的数据集创建，包括本地文件系统，还有所有Hadoop支持的数据集，比如HDFS、Cassandra、HBase、Amazon S3等。 RDD只能基于在稳定物理存储中的数据集和其他已有的RDD上执行确定性 ...
分类：
Web程序 时间：
2016-07-31 20:45:10
阅读次数：
254
RDD的缓存 Spark速度非常快的原因之一，就是在不同操作中在内存中持久化（或缓存）一个数据集。当持久化一个RDD后，每一个节点都将把计算的分片结果保存在内存中，并在对此数据集（或者衍生出的数据集）进行的其他动作（action）中重用。这使得后续的动作变得更加迅速（通常快10倍）。RDD相关的持久 ...
分类：
Web程序 时间：
2016-07-31 20:43:23
阅读次数：
676
我的运行环境： 系统：windows10 ,64位 PHP：5.6.8 TS,VC11 ,32位 Apache： 2.0 我安装的是xampp集成环境 pthreads的windows扩展文件下载地址：http://windows.php.net/downloads/pecl/releases/pt ...
分类：
编程语言 时间：
2016-07-31 20:41:26
阅读次数：
337
