背景 ElasticSearch 的使用度越来越普及了,很多公司都在使用。有做日志搜索的,有做商品搜索的,有做订单搜索的。 大部分使用场景都是通过程序定期去导入数据到 ElasticSearch 中,或者通过 CDC 的方式来构建索引。在这种场景下,更新数据都是单条更新,比如 ID=1 的数据发生了 ...
分类:
其他好文 时间:
2020-07-29 15:39:34
阅读次数:
155
使用batch-import导入节点和关系 参考文档链接: 英文文档 中文版 博客 下载batch-import工具 batch-import原始项目地址:https://github.com/jexp/batch-import 在导入.gz压缩文件时,会出现关系无法导入的情况,所以如果要使用.gz ...
分类:
其他好文 时间:
2020-07-29 15:00:17
阅读次数:
99
SELECT INTO OUTFILE LOAD DATA INFILE mysqlimport SELECT INTO OUTFILE > help select; Name: 'SELECT' Description: Syntax: SELECT [ALL | DISTINCT | DISTI ...
分类:
数据库 时间:
2020-07-28 22:28:01
阅读次数:
77
今天要用Tecplot做后处理。需要导入几十个甚至上百个数据文件,并且每导入一个数据文件,就要重命名,以便区分。这样的工作量手动一个一个地操作显然不太现实,我想能不能让其自动地完成这些重复地操作。这个问题让我想到了以前用的几款软件都有宏Marco这个命令,即可以把操作过程录制成宏,然后运行这个宏命令 ...
分类:
系统相关 时间:
2020-07-28 14:08:28
阅读次数:
201
Elasticsearch中当我们设置Mapping(分词器、字段类型)完毕后,就可以按照设定的方式导入数据。
分类:
其他好文 时间:
2020-07-27 23:37:15
阅读次数:
70
数据准备1 数据导入、导出 读取Excel(.xlrx文件)并进行导出备份 import pandas as pd from pandas import DataFrame # Pandas可以直接从xlsx(excel)、csv等文件中导入数据,也可以输出到xlsx(excel)、csv格式中 s ...
分类:
其他好文 时间:
2020-07-26 19:00:03
阅读次数:
59
话不多说,直接上操作:(本文是从excel表读取数据输出到控制台) 1.数据准备,根据数据表结构新建excel表,放入一些测试数据,数据表结构如下图1: 图1 数据表结构 excel数据如下图2:(建议excel表列名称和数据表的列名保持一致) 图2 excel表数据 2.新建一个控制器和业务逻辑代 ...
分类:
Web程序 时间:
2020-07-22 20:06:53
阅读次数:
185
默认安装的php不存在pdo扩展,因此在使用到的时候会报错,直接使用这个命令 apt-get install php-mysql 就可以成功安装pdo扩展 安装完数据库后需要导入sql语句,先进入数据库中提前创建数据库名,比如laykefu的数据库,-u -p 数据库名 ,后面跟上sql文件的地址就 ...
分类:
数据库 时间:
2020-07-16 12:01:11
阅读次数:
72
前面已经做了类别和连续特征的分析,本文将针对特征工程进行 导入数据 import pandas as pd import numpy as np import matplotlib import matplotlib.pyplot as plt import seaborn as sns %matp ...
分类:
其他好文 时间:
2020-07-15 23:08:45
阅读次数:
90
执行报错如下: 20/07/15 14:02:34 ERROR hive.HiveConfig: Could not load org.apache.hadoop.hive.conf.HiveConf. Make sure HIVE_CONF_DIR is set correctly. 20/07/ ...
分类:
数据库 时间:
2020-07-15 15:29:36
阅读次数:
88