from selenium import webdriver import requests,os from lxml import etree from selenium.webdriver.chrome.options import Options from urllib import requ... ...
分类：
其他好文 时间：
2019-05-06 18:56:21
阅读次数：
118
那么如何才能制定出一份可行性强的大数据学习计划呢？我们可以从以下几个方面去制定。一、目标首先你需要制定一个明确的你想要实现的长远的目标。比如，半年内学习相关课程，初步掌握大数据基础知识；比如，一年内熟悉并能在实际项目中应用；再比如，1年内达到市面上对大数据分析师的基本要求，成功找到一份大数据分析师的工作。在这里还是要推荐下我自己建的大数据学习交流群:529867072，群里都是学大数据开发的，如果
分类：
其他好文 时间：
2019-05-06 13:07:22
阅读次数：
179
一、设计用途： 公司PCB制成板降成本，选择的MCU比项目需求少一个串口，为满足制成板成本和项目对串口需求，选择模拟一路串口。 二、硬件电路： 三、设计实现： 工具&软件：STM32F030R8 KEIL5 STM32CubeMX 1、 串口通信 串口是一种很常用的通信接口，按位(bit)发送和接收 ...
分类：
其他好文 时间：
2019-05-06 01:32:57
阅读次数：
114
大数据的开发过程，如图1-1所示。图1-1大数据开发通用步骤图上图只是一个简化后的步骤和流程，实际开发中，有的步骤可能不需要，有的还需要增加步骤，有的流程可能更复杂，因具体情况而定。下面以Google搜索引擎为例，来说明以上步骤。如果你想要学好大数据最好加入一个好的学习环境，可以来这个Q群529867072这样大家学习的话就比较方便，还能够共同交流和分享资料大数据采集Google的数据来源于互联网
分类：
其他好文 时间：
2019-05-05 11:43:58
阅读次数：
122
需求:将前些日子采集的评论存储到hbase中 思路: 先用fastjson解析评论,然后构造rdd,最后使用spark与phoenix交互,把数据存储到hbase中 部分数据: 1 [ 2 { 3 "referenceName": "Apple iPhone XR 64GB 黑色 移动联通电信4G全 ...
分类：
编程语言 时间：
2019-05-04 20:11:08
阅读次数：
223
大数 据 主要 具有 四方 面的 典型 特征—— 规模 性（ Volume）、 多样性（ Variety）、 高速 性（ Velocity） 和 价值 性（ Value）， 即 所谓 的" 4V"。 大数据时代的关键技术：（1） 大数 据 采集 技术（2） 大 数据 预处理 技术（3） 大数 据 存... ...
分类：
其他好文 时间：
2019-05-03 18:46:39
阅读次数：
288
v4.2.5更新内容：1.修复服务实例设置ClearSocketSession参数时，可能出现资源无法释放而造成异常的情况。2.修复关闭宿主程序后进程仍然无法退出的问题。2.增加机器学习框架。3.优化核心代码。下载地址：官方下载 7.增加机器学习算法，通讯采集数据与算法相结合 7.1概述 Serve ...
分类：
编程语言 时间：
2019-05-03 18:14:35
阅读次数：
204
1.电流的采集与ADC采集电压方式一样，需要先用硬件将电流信号转换成电压信号，然用ADC采集电压 a.ADC初始化 b.将ADC采集到的电压信号换算成电流信号 c.电压转换电流公式： 先确定所选择的芯片是多少位，如果是10位满量程为1023,如果是12位满量程为4095 确定输出的电流是多少，然后连 ...
分类：
其他好文 时间：
2019-05-03 11:44:53
阅读次数：
225
股票软件都提供自定义公式的功能，但因为常规股票软件都是点播数据，自定义公式对分时行情完全无效，要想更细腻的分析，只能找股票实时行情接口 一般来说，有如下3种版本 屌丝版 去门户财经频道采集数据，百度，sina，搜狐，网易，和讯都有。首推sina，页面结构良好，同时提供js接口和动态gif绘制 jso ...
分类：
其他好文 时间：
2019-05-02 14:26:47
阅读次数：
226
master做为集合节点 $FLUME_HOME/conf/agent1.conf agent1.channels = ch1 agent1.sources = avro-source1 agent1.sinks = log-sink1 agent1.channels.ch1.type=memory ...
分类：
Web程序 时间：
2019-05-02 09:41:57
阅读次数：
188
