软件开发的常见文档 软件开发的常见文档 01立项调查报告02立项建议书 03立项评审报告 04项目设计开发任务书 05项目计划 06质量保证计划 07配置管理计划 08需求分析说明书 09概要设计说明书 10详细设计说明书 11数据库设计说明书 12数据库表详细设计 13单元测试计划 14测试脚本 ...
分类:
其他好文 时间:
2019-02-20 13:13:11
阅读次数:
230
Hadoop压缩配置 文件存储格式 企业级调优 1 Fetch抓取 Fetch抓取是指,Hive中对某些情况的查询可以不必使用MapReduce计算。例如:SELECT * FROM employees;在这种情况下,Hive可以简单地读取employee对应的存储目录下的文件,然后输出查询结果到控 ...
分类:
其他好文 时间:
2019-02-20 10:07:51
阅读次数:
232
Sqoop是一款开源的工具,主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql...)间进行数据的传递,可以将一个关系型数据库(例如 : MySQL ,Oracle ,Postgres等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据导进到关系型数据库 ...
分类:
其他好文 时间:
2019-02-18 18:44:00
阅读次数:
179
HIVE-如何查看执行日志 HIVE既然是运行在hadoop上,最后又被翻译为MapReduce程序,通过yarn来执行。所以我们如果想解决HIVE中出现的错误,需要分成几个过程 2,3过程中的错误,请参考hadoop相关的教程,这里只是提醒大家思考的时候需要考虑到这两个方面的原因。搞清楚哪一个过程 ...
分类:
其他好文 时间:
2019-02-17 23:57:37
阅读次数:
394
Google Hack技术 目前黑客利用Google Hack技术来进行入侵或资料收集的时候主要有以下几点: ①、在入侵之前,可以利用Google Hack技术进行信息收集,典型的有比如查找网站后台及网站的拓扑结构等等。 ②、当发现或者公布某个漏洞之后,利用Google Hack技术大量收集存在这个 ...
分类:
其他好文 时间:
2019-02-17 23:46:52
阅读次数:
364
2019/2/16星期六大数据领域技术总体介绍(各个组件的作用)1、大数据技术介绍大数据技术生态体系:Hadoop元老级分布式海量数据存储、处理技术系统,擅长离线数据分析Hbase基于hadoop的分布式海量数据库,离线分析和在线业务通吃Hivesql基于hadoop的数据仓库工具,使用方便,功能丰富,使用方法类似SQLZookeeper集群协调服务Sqoop数据导入导出工具Flume数据采集框架
分类:
其他好文 时间:
2019-02-17 09:17:32
阅读次数:
201
下载地址 http://zookeeper.apache.org/ http://www.apache.org/dyn/closer.cgi/zookeeper/ 解压下载的zookeeper-xxx.tar.gz文件到D:\DevSoft\zookeeper-xxx 进入Conf目录 复制一份zo ...
1、先查看是否安装有以下组件,若有先考虑彻底删除再安装(安装严格按照下面顺序进行) 查看nvidia 版本 查看cuda 版本 查看cudnn 版本 2、nvidia 驱动,cuda,cudnn对应关系 nvidia与cuda要求的版本对应关系: https://docs.nvidia.com/cu ...
分类:
系统相关 时间:
2019-02-16 00:05:18
阅读次数:
1002
? nvcc 预定义的宏 ? nvcc 接受的文件类型 ? nvcc 编译流程选项 ? nvcc 编译动作选项 ? nvcc 编译工具选项 ? nvcc 编译驱动指导选项 ? nvcc 文件及目录选项(默认多参数) ? CUDA 兼容性选项 ? 原生编译器选项 ? PTX选项,使用 -Xptxas ...
分类:
其他好文 时间:
2019-02-16 00:04:40
阅读次数:
320
关于PHP程序员技术职业生涯规划 看到很多PHP程序员职业规划的文章,都是直接上来就提Linux、PHP、MySQL、Nginx、Redis、Memcache、jQuery这些,然后就直接上手搭环境、做项目,中级就是学习各种PHP框架和类库,高级阶段就是MySQL优化、PHP内核与扩展、架构设计这些 ...
分类:
Web程序 时间:
2019-02-13 12:36:51
阅读次数:
187