作为明星产品，杉岩海量对象存储(SandStoneMOS)在企业级市场顺势推出后，即受到了广泛的认可和接纳，它在众多企业级用户的场景中具备独特的价值属性，例如：海量小文件的访问性能保障、分支总部间的信息高速分发、数据中心级的双活或多活容灾等等，都让用户在面临PB级甚至EB级规模的非结构化数据存储时，有了一个全新的兼顾成本和服务的选择。SandStoneMOS在接口兼容性、数据安全性、业务高可用、全
分类：
其他好文 时间：
2019-12-18 17:49:18
阅读次数：
82
SQL Server是微软的一款专业免费的关系数据库管理工具， 是一个全面的数据库平台，使用集成的商业智能 (BI)工具提供了企业级的数据管理服务，SQL Server 数据库引擎为关系型数据和结构化数据提供了更安全可靠的存储功能，让管理人员可以构建和管理用于业务的高可用和高性能的数据应用程序。 S ...
分类：
数据库 时间：
2019-12-17 22:27:17
阅读次数：
858
海量数据的爆炸式增长，使存储技术近五年的发展速度远超过去n年的发展历程。C端用户一个明显的感觉就是：U盘存储容量从过去物以稀为贵的几十M迅速发展到今天几十G、甚至TB级，家用电脑硬盘容量更是TB级标配。那么，企业级又迎来了怎样的变化?IDC数据显示，到2020年，企业数据总体将达到44ZB，其中80%的数据将会是非结构化数据(图片、视频、归档以及企业级备份等各种数据)。显然，海量数据的产生正在促使
分类：
其他好文 时间：
2019-12-17 18:19:23
阅读次数：
101
sparksql是spark中的一个模块，主要用于进行结构化数据的处理，他提供的最核心的编程抽象，就是DataFrame。同时，sparksql还可以作为分布式的sql查询引擎。 最最重要的功能就是从hive中查询数据。 Dataframe可以理解为：以列的形式组织的，分布式的数据集合。 Dataf ...
分类：
数据库 时间：
2019-12-17 15:26:10
阅读次数：
121
对象存储可以简单理解为用来存储图片、音频、视频等非结构化数据的数据池。相对于主机服务器，具有读写速度快，利于分享的特点。杉岩数据在这里给大家总结了这六点。1、网站数据动静分离，大幅提升网页性能一般情况下，我们都是建议使用主机服务器和对象存储分工合作的方式来存储网站数据。主机服务器主要负责存储网站的动态数据，对象存储则用来存储网站的静态文件。从而实现网站的动静分离，当用户访问一个网站时，分别从主机服
分类：
其他好文 时间：
2019-12-16 22:40:11
阅读次数：
134
Spider Spider类定义了如何爬取某个(或某些)网站。包括了爬取的动作(例如:是否跟进链接)以及如何从网页的内容中提取结构化数据(爬取item)。 换句话说，Spider就是您定义爬取的动作及分析某个网页(或者是有些网页)的地方。 class scrapy.Spider是最基本的类，所有编写 ...
分类：
其他好文 时间：
2019-12-08 14:02:21
阅读次数：
79
第一节:杂文 SPSS和其他的一些同款统计分析软件的对比 SPSS和其他的软件都是解决结构化的数据 除了R语言外其他都是收费的 Python解决非结构化数据 SPSS主要用于市场问卷、电信的等行业 SAS主要用于金融、医药、生化等一些不差钱的行业 数据分析的面向过程 实验室 单位 30条数据 问卷调 ...
分类：
其他好文 时间：
2019-11-30 00:08:54
阅读次数：
288
kafka 生产者、消费者与分区的关系 背景 最近和海康整数据对接, 需要将海康产生的结构化数据拿过来做二次识别. 基本的流程: 海康大数据 kafka server 平台 Kafka 的 topic 正常过车 topic： BAYONET_VEHICLEPASS 违法过车 topic： BAYON ...
分类：
其他好文 时间：
2019-11-29 18:25:16
阅读次数：
73
生活中的数据 搜索引擎是对数据的检索，所以我们先从生活中的数据说起。我们生活中的数据总体分为两种： 结构化数据 非结构化数据 结构化数据：也称作行数据，是由二维表结构来逻辑表达和实现的数据，严格地遵循数据格式与长度规范，主要通过关系型数据库进行存储和管理。指具有固定格式或有限长度的数据，如数据库，元 ...
分类：
其他好文 时间：
2019-11-25 11:29:41
阅读次数：
64
一、数据抓取（Data Scraping）的介绍 使用截据抓取使您可以将浏览器，应用程序或文档中的结构化数据提取到数据库，.csv文件甚至Excel电子表格中. 二、Data Scraping在UiPath中的使用 1.打开设计器，在设计库中新建一个Sequence，为序列命名及设置Sequence ...
