gartner定义big data；《大数据时代》；大数据生态应用领域；target一家企业twittertescofacebook 婚嫁后推荐（拍婚纱照的价位，品味推后续生活产品）大数据应用技术 语义网（目的：让计算机读懂文档知识） 知识图谱（给AI装个大脑，基于图数据，是图存储，优势是更清晰） ...
分类：
其他好文 时间：
2020-06-15 11:59:27
阅读次数：
76
声明： 1）仅作为个人学习，如有冒犯，告知速删！ 2）不想误导，如有错误，不吝指教！ 目标： 1. 爬取拉钩网中的关于编程语言的 1）薪资，2）城市范围，3）工作年限，4）学历要求; 2 .将四部分保存到mysql中; 3.对四部分进行数据可视化; 4.最后通过pyecharts+bootstrap ...
分类：
其他好文 时间：
2020-06-14 18:21:41
阅读次数：
60
python数据可视化分析首先载入必要的库import warningsimport numpy as npimport pandas as pdimport matplotlib.pyplot as pltimport seaborn as snssns.set()warnings.filterw ...
分类：
编程语言 时间：
2020-06-14 14:52:00
阅读次数：
98
opencv开源库来源于网络，功能相当强悍，欢迎与我交流！或评论区进行留言讨论它类似一个找茬的小游戏App，但知识点相当丰富**主要功能：1.登录，注册（有服务端servlet实现）2.本地照片选择（只能对两张图像进行数据处理以及比对）3.主要依赖OpenCV开源库来处理图像数据：如二值化，提取骨架，高斯模糊等等通过一系列算法综合使用，去掉要对比数据的干扰因子，然后提取最主要点进行数据比对4、一系
分类：
移动开发 时间：
2020-06-14 09:13:14
阅读次数：
74
最近在学习Weka发现是一个很不错的数据挖掘工具，在这里介绍下。 什么是数据挖掘？什么是Weka？ 数据挖掘是一门成熟的技术，Weka 是数据挖掘的工具包，是 Waikato Environment for Knowledge Analysis 的首字母缩略词，我们称作 Weka。 Explorin ...
分类：
其他好文 时间：
2020-06-13 11:19:41
阅读次数：
168
一、数据库概念设计 主要解决数据需求，即如何准确地理解数据需求。 任务： 涉及的数据范围、数据的属性特征、数据之间的关系、数据的约束、数据安全性要求、数据处理需求、保证信息模型方便地转换成数据库的逻辑结构。 依据：依据是需求说明书、功能模型、收集到的各类报表，从中抽取中数据之间的相互联系和满足的约束 ...
分类：
数据库 时间：
2020-06-13 10:29:47
阅读次数：
89
昨天面阿里最后栽在一道很常见的海量数据处理上了，也怪之前没专门花时间准备这个问题。今天参考了July的博客，又反思了下自己面试时错误的思路，重新整理为下面的解答过程。 先上July的博客对类似问题的解答思路： 搜索引擎会通过日志文件把用户每次检索使用的所有检索串都记录下来，每个查询串的长度为1-25 ...
分类：
其他好文 时间：
2020-06-12 20:26:01
阅读次数：
122
图源：unsplash 笔者经常编写Python脚本来进行数据处理、数据传输和模型训练。随着数据量和数据复杂性的增加，运行脚本可能需要一些时间。在等待数据处理完成时可以同时做一些其他工作。 很多人学习python，不知道从何学起。很多人学习python，掌握了基本语法过后，不知道在哪里寻找案例上手。 ...
分类：
编程语言 时间：
2020-06-12 14:33:27
阅读次数：
67
前沿：本次分享主要是基于类的视图 一、什么是视图函数？ 简单来说，被url装饰的==>后面处理逻辑的方法就是视图函数，一般制作三件事，接收请求参数，数据处理逻辑、狗仔响应对象对并返回 一般来说视图函数内的逻辑不应该过长，具体逻辑在另外的模块去封装，等封装的尽量尽快封装，不要等以后，以后重构的话更麻烦 ...
分类：
其他好文 时间：
2020-06-12 10:56:55
阅读次数：
40
ApacheSpark是行业中流行和广泛使用的大数据工具之一。ApacheSpark已成为业界的热门话题，并且如今非常流行。但工业正在转移朝向apacheflink。ApacheSpark简介ApacheSpark是为快速计算而设计的开源，闪电般快速的集群计算框架。ApacheSpark扩展了MapReduce模型，以有效地将其用于多种计算，包括流处理和交互式查询。ApacheSpark的主要功能
分类：
Web程序 时间：
2020-06-12 09:14:25
阅读次数：
61
