本文源码： "GitHub·点这里" || "GitEE·点这里" 一、文档类型简介 1、Excel文档 Excel一款电子表格软件。直观的界面、出色的计算功能和图表工具，在系统开发中，经常用来把数据转存到Excel文件，或者Excel数据导入系统中，这就涉及数据转换问题。 2、PDF文档 PDF是 ...
分类：
编程语言 时间：
2020-02-07 11:05:14
阅读次数：
73
传统的机器学习任务从开始到建模的一般流程是：获取数据 -> 数据预处理 -> 训练建模 -> 模型评估 -> 预测，分类。本文我们将依据传统机器学习的流程，看看在每一步流程中都有哪些常用的函数以及它们的用法是怎么样的。希望你看完这篇文章可以最为快速的开始你的学习任务。 1. 获取数据 1.1 导入s ...
分类：
其他好文 时间：
2020-02-06 19:45:45
阅读次数：
61
今天没有继续整数据，这个数据还需要进一步的清洗，很麻烦，暂时不想清洗，今天看了一部分spark的内容，在网上查找了一些资料，明天将使用eclipse连接spark进行编程实验，或者进行数据的清洗。 今天也将数据导入到了数据库中。 ...
分类：
其他好文 时间：
2020-02-03 19:08:28
阅读次数：
48
使用sqoop将hive中的统计数据导入到mysql中 思路：首先在hive上创建临时表，然后将统计数据放在临时表中，最后通过sqoop将临时表中的数据导入到mysql中。 例子：将各个官方部门回答的数量都导入到mysql中。 1.在hive中创建capital_temp表 create table ...
分类：
其他好文 时间：
2020-02-03 15:56:29
阅读次数：
286
版本：5.7.28服务器：mysql 192.168.4.201.MySQL存储引擎的配置查看服务支持的存储引擎查看默认存储类型更改表的存储引擎设置数据库服务默认使用的存储引擎查看存储引擎信息mysql> SHOW ENGINES;+ + + | Engine | Support |+ + + | ...
分类：
数据库 时间：
2020-02-03 12:09:26
阅读次数：
76
1 安装python的mysql驱动 $ conda install mysql-connector-python 2 测试mysql驱动是否安装成功 import不报错，即说明安装成功 >>> import mysql.connector 3 查询数据 # 导入MySQL驱动: import my ...
分类：
数据库 时间：
2020-01-31 10:56:13
阅读次数：
84
一、实验目的 （1）通过实验掌握基本的 MLLib 编程方法； （2）掌握用 MLLib 解决一些常见的数据分析问题，包括数据导入、成分分析和分类和 预测等。 二、实验平台 操作系统：Ubuntu16.04 JDK 版本：1.7 或以上版本 Spark 版本：2.1.0 数据集：下载 Adult 数 ...
分类：
其他好文 时间：
2020-01-29 23:28:10
阅读次数：
134
一、问题 最近开发那边反应 的数据好像一个月没有更新了，登陆到 solr 的服务器，查看日志，有以下的报错日志。 二、问题原因 根据报错内容，我们查看其中的配置文件 发现在 password 的字段里面有个特殊字符 , 在 xml 中 是特殊字符，我们需要转义它让它正常显示为 。 三、问题解决 我们 ...
分类：
其他好文 时间：
2020-01-29 15:46:27
阅读次数：
93
最近在研究redis 遇到redis requires Ruby version >= 2.2.2问题 解决办法是 先安装rvm，再把ruby版本提升至2.3.3 1.安装curl sudo yum install curl 2. 安装RVM curl -L get.rvm.io | bash -s ...
分类：
其他好文 时间：
2020-01-28 14:17:30
阅读次数：
85
最近有一个将 mysql 数据导入到 MongoDB 中的需求，打算使用 Kettle 工具实现。本文章记录了数据导入从0到1的过程，最终实现了每秒钟快速导入约 1200 条数据。一起来看吧~ 一、Kettle 连接图 简单说下该转换流程，增量导入数据： <! more 1）根据 source 和 ...
分类：
数据库 时间：
2020-01-24 23:40:06
阅读次数：
116
