今天想解决下面几个问题。 1.lightgbm cpu太慢了，我装了gpu的版本，对比了之后发现训练速度从10min缩短到8min。感觉很少，不知道是不是我姿势错误。 过程如下。 安装软件依赖sudo apt-get install --no-install-recommends git cmake ...
分类：
其他好文 时间：
2020-07-22 23:32:39
阅读次数：
92
function []=datapro714()% 处理的数据截止7/14/20% [csvdata,~,rawcsvdata] = xlsread('who_covid_19_sit_rep_time_series.csv');[~,~,rawconfirmed] = xlsread('time_ ...
分类：
其他好文 时间：
2020-07-21 13:58:12
阅读次数：
68
#一、实验目标 在掌握基于Weka工具的数据挖掘（分类、回归、聚类、关联规则分析）应用的基础上，实现基于Weka API的数据挖掘程序设计。 #二、实验内容 1.下载安装JDK 7.0 64位版，Weka 3.7版，Eclipse IDE for Java Developers 4.0以上版本。 2 ...
分类：
其他好文 时间：
2020-07-18 00:35:51
阅读次数：
87
编辑推荐 浅入深地讲解Keras与TensorFlow深度学习类神经网络使用实际的数据集配合范例程序代码介绍各种深度学习算法，并示范如何进行数据预处理、训练数据、建立模型和预测结果 内容简介 本书提供安装、上机操作指南，同时辅以大量范例程序介绍TensorFlow Keras深度学习方面的知识。本书 ...
分类：
其他好文 时间：
2020-07-14 10:37:34
阅读次数：
103
Alink 是阿里巴巴基于实时计算引擎 Flink 研发的新一代机器学习算法平台，是业界首个同时支持批式算法、流式算法的机器学习平台。本文和下文将介绍线性回归在Alink中是如何实现的，希望可以作为大家看线性回归代码的Roadmap。 ...
分类：
其他好文 时间：
2020-07-11 09:32:53
阅读次数：
65
1.数据预处理 xgb 训练的数据是 DataFream 不能是List 读取数据 利用pandas 读取数据,这里读取的是excel数据 data = pd.read_excel(filename, sheet_name='tabelname') 分词处理 利用jieba分词搞定 seg1 = j ...
分类：
其他好文 时间：
2020-07-08 23:05:15
阅读次数：
64
1.产品概述 PIE-Basic是一款高度自动化、简单易用的遥感工程化应用软件，主要面向国内外主流的多源遥感影像数据提供遥感图像基础处理、辅助解译、信息提取及专题制图功能。平台采用多核并行计算技术，大幅提高了软件运行效率，能更好的适应大数据量的处理需要；采用组件化设计，可根据用户具体需求对软件进行灵 ...
分类：
其他好文 时间：
2020-07-07 15:06:25
阅读次数：
95
一、数据预处理前的准备阶段： 1、下载哨兵数据：在ASF官网（下载地址https://www.asf.alaska.edu/sar-data/palsar/）进行下载，相对于欧空局的官网下载速度要很好多，复制下载链接，直接在EagleGet下载器下载，该下载器免费，不限速。在ASF上直接下载SLC数 ...
分类：
其他好文 时间：
2020-07-04 18:54:35
阅读次数：
130
本文始发于个人公众号：TechFlow，原创不易，求个关注 今天是spark专题的第七篇文章，我们一起看看spark的数据分析和处理。 过滤去重 在机器学习和数据分析当中，对于数据的了解和熟悉都是最基础的。所谓巧妇难为无米之炊，如果说把用数据构建一个模型或者是支撑一个复杂的上层业务比喻成做饭的话。那 ...
分类：
其他好文 时间：
2020-07-02 13:20:51
阅读次数：
67
数据结构 线性构造treap treap的线性构造可以使复杂度锐减到$O(n)$，很优秀 treap的本质就是小根堆+二叉搜索树，即保证val满足搜索树的同时，维护rad的小根堆。 现在我们先把数据预处理一下，按val值升序排序。那么我们不必再关系val，专注于rad即可 先考虑一个特殊情况，假如数 ...
分类：
其他好文 时间：
2020-06-29 23:07:14
阅读次数：
105
