Pocket:Elastic Ephemeral Storage for Serverless Analytics 还没有搞完= =有空了继续~~ 摘要 Serverless computing越来越受欢迎,他允许用户快速在云上发起成千上万的short-lived tasks,并且具有高弹性,能够精 ...
分类:
其他好文 时间:
2020-10-19 22:44:58
阅读次数:
19
一、VectorAssembler package com.home.spark.ml import org.apache.spark.SparkConf import org.apache.spark.ml.feature.VectorAssembler import org.apache.spa ...
分类:
其他好文 时间:
2020-10-18 09:57:35
阅读次数:
15
一。登录思路 先通过 wx.login 返回 res.code 到后台接口换取 openId, sessionKey, unionId。然后通过 wx.getUserInfo 获取用户信息 如果要获取用户敏感信息则要 wx.getUserInfo 返回的数据传到后台进行解析(我这边是用大佬封装好的a ...
分类:
微信 时间:
2020-10-14 20:50:48
阅读次数:
66
猫场面试题第 1 套 以下为我为大家整理的猫场面试题第一套,均为笔者自己参加面试或者一些读者分享给我的题目,保证真实和准确性。 1 框架部分 1.1 Spark 提交 job 流程 所谓提交流程,其实就是我们开发人员根据需求写的应用程序通过 Spark 客户端提交给 Spark 运行环境执行计算的流 ...
分类:
其他好文 时间:
2020-10-13 17:19:39
阅读次数:
26
MySQL存储引擎(MySQL的“文件系统”)zabbix用到的是tokudb三方引擎!该引擎支持多次数据的插入,性能不错innodb功能总览(重点功能关注!):事务/锁定粒度行/备份与恢复/自动故障恢复(理论上不怕突然断电,宕机等)存储引擎查询select@@default_storage_engine;//查看默认存储引擎showengines;//还可以看到存储引擎是否支持事务showcre
分类:
数据库 时间:
2020-10-12 20:44:17
阅读次数:
36
算法基础 数据分析 数学基础 在进行算法建模时,深入了解数据情况,做各类探索性分析,统计建模等工作非常重要,这方面对一些数学基础知识有一定的要求,例如概率论,统计学等。这方面除了经典的数学教材,也可以参考更程序员向的《统计思维》,《贝叶斯方法》,《程序员的数学2》等书籍。 自我考核:理解实际项目中的 ...
分类:
编程语言 时间:
2020-10-10 17:55:27
阅读次数:
24
一、连接SQL package com.njbdqn.linkSql import java.util.Properties import org.apache.spark.sql.SparkSession import org.apache.spark.sql._ object LinkSql { ...
分类:
数据库 时间:
2020-10-06 20:52:59
阅读次数:
35
Receiver Direct offset注意点 ...
分类:
其他好文 时间:
2020-10-06 20:46:36
阅读次数:
26
简介 Web Storage为浏览器提供了方便的key value存储,是一种比cookie更加方便简洁的存储方式。也是诸多客户端存储方式中非常常见的一种。 一起来看看吧。 浏览器的本地存储技术 除了最早的使用cookie来进行本地存储之外,现代浏览器使用Web Storage API来方便的进行k ...
PySpark基于Python的Spark企业级大数据分析,以实际数据分析为驱动讲解 ...
分类:
编程语言 时间:
2020-09-18 00:55:02
阅读次数:
44