1、BigData是什么?大数据(BigData),指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合,具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。大数据包括结构化、半结
分类:
其他好文 时间:
2020-03-18 14:04:51
阅读次数:
105
大数据开发总体架构: Hadoop是大数据开发所使用的一个核心框架。使用Hadoop可以方便的管理分布式集群,将海量数据分布式的存储在集群中,并使用分布式并行程序来处理这些数据。 Hadoop由许多子系统组成,如下图: Hadoop1.x与2.x的对比: YARN:管理集群资源(内存、CPU) ...
分类:
其他好文 时间:
2020-03-17 19:30:09
阅读次数:
49
content: 1:generator of list【】: list=[x for x in range(10)] realize:[0,1,2,3,4,5,6,7,8,9] list=[x 2 for x in range(10)] list=[x x for x in range(10)] ...
分类:
编程语言 时间:
2020-03-16 13:03:28
阅读次数:
63
介绍 jq is like for JSON data you can use it to slice and filter and map and transform structured data with the same ease that , , and friends let you p ...
分类:
Web程序 时间:
2020-03-14 23:54:54
阅读次数:
89
梨视频(PearVideo)是一个比较知名的资讯短视频平台,里面有很多不错的资讯视频。有时候我们看到一个跟自己息息相关的视频,想转发到自己的微博,尴尬了,但不知道怎么将梨视频保存到手机相册。今天小编就教教你怎么保存梨视频到电脑本地或者手机相册。 操作步骤非常简单,聪明的你一看就懂。 首先在梨视频AP ...
分类:
其他好文 时间:
2020-03-14 11:03:28
阅读次数:
263
1. 准备工作 1.1. 安装并初始化airflow,参考以下文档: https://www.cnblogs.com/zackstang/p/11082322.html 其中还要额外安装的是: sudo pip-3.6 install -i https://pypi.tuna.tsinghua.ed ...
分类:
其他好文 时间:
2020-03-12 21:53:23
阅读次数:
68
设计模式学习之路(二) 面向对象 面向对象编程:OOP 全称Object Oriented Programming。 面向对象编程语言:OOPL 全称Object Oriented Programming Language。 面向对象的特点: 面向对象编程是一种编程范式或编程风格。它以类或对象作为组 ...
分类:
其他好文 时间:
2020-03-10 15:39:21
阅读次数:
51
[root@centos6~]#lsblk--查看/dev/sdbNAMEMAJ:MINRMSIZEROTYPEMOUNTPOINTloop07:00100M0loop/mnt/xdisksda8:00200G0disk├─sda18:101G0part/boot├─sda28:2097.7G0part/├─sda38:3048.8G0part/data├─sda48:401K0part└─sda
分类:
其他好文 时间:
2020-03-10 13:49:04
阅读次数:
73
1. AOP概述 1.1. 什么是AOP, 面向切面编程 AOP为Aspect Oriented Programming的缩写, 意为:面向切面编程, 通过预编译方式和运行期动态代理实现程序功能的统一维护的一种技术. AOP是OOP的延续, 是函数式编程的一种衍生范型. 利用AOP可以对业务逻辑的各 ...
分类:
编程语言 时间:
2020-03-10 12:09:19
阅读次数:
77
为什么会叠加? 连续点击的时候,会开启很多计算器,当3秒的时候,这些计算器同时向任务队列提交任务,event loop是一个不断循环的过程,找到任务就执行,没有时间间隔。 函数防抖: 在开启当前计算器的时候,清除前面的计算器任务。连续点击,保证最后一次点击的任务执行,前面点击开启的任务都被清除了。这 ...
分类:
其他好文 时间:
2020-03-09 21:03:09
阅读次数:
59