本文所指之数据工程，限定于: 数据分析、数据采集(集成) 1 网站 spider-flow - 智能高效的在线爬虫 spider-flow 是一个无需写代码的爬虫平台，以图形化方式定义爬虫流程，无需代码即可实现一个爬虫 superset.workerindata.com - 账号: bilibili ...
分类：
数据库 时间：
2021-06-11 18:27:40
阅读次数：
0
其实很早就是用kafka了，但是一直都用的非常简单，最近写一个小功能的时候又要用到kafka，于是就花点时间好好看了一下网上关于kafka的一些文档和博客，发现了一个很不错的博客，做个记录和分享。 原文链接： https://www.cnblogs.com/rexcheny/articles/946 ...
分类：
编程语言 时间：
2021-06-11 18:14:50
阅读次数：
0
背景 在做moblink自动化测试任务时，遇到以下问题，导致测试用例编写遇到问题。需要在mobLink APP中分享一条链接，并且使用多种浏览器打开链接唤醒mobLinkAPP。 appium提供了一个方法可以在浏览器中打开URL driver.get(String URL); 此方法执行时，app ...
分类：
移动开发 时间：
2021-06-11 18:13:04
阅读次数：
0
博弈 概念 研究博弈论时，我们的目的是研究人们在不同的博弈环境下倾向于采取怎样的决策。 基本要素 参与者（ 不少于两人，简单起见只考虑两人） 策略 收益 基本假设 每个参与者都对博弈结构充分了解 参与者之间无法交流，也不会考虑个人收益之外的因素 每个参与者选择的策略都是为了达到自身收益最大化 最佳应 ...
分类：
其他好文 时间：
2021-06-11 18:11:25
阅读次数：
0
数据分析中将两个数据集进行 Join 操作是很常见的场景。在 Spark 的物理计划阶段，Spark 的 Join Selection 类会根 据 Join hints 策略、Join 表的大小、 Join 是等值 Join 还是不等值以及参与 Join 的 key 是否可以排序等条件来选择最 终的 ...
分类：
其他好文 时间：
2021-06-10 18:28:12
阅读次数：
0
python3+openpyxl操作excel（xlsx）学习分享，如有问题请大佬指教！ 代码如下： 1 import openpyxl 2 3 class DoExcel: 4 """操作excel类：xlsx格式文件 5 file：文件名及路径 6 sheet：表单名""" 7 def __in ...
分类：
编程语言 时间：
2021-06-10 18:24:32
阅读次数：
0
首先我们达成一个共识，框架是用来帮助我们提升效率，节省时间，避免处理那些低级细节的，如果能达到这个目标，就是一个合适的框架。选择合适的框架，会事半功倍。 Python 领域，开发 Web 应用程序的三个主流框架是 Django，Flask 和 FastAPI。它们都非常优秀，但有各自的特点。本文接下 ...
在讲述本文之前，我尽量以一个什么也不清楚的初学到入门的用词来阐述什么是 ISP 调试，以及为什么需要调试。 如果你从来都没有接触过什么是摄像头 ISP 调试，我想这个文章可以给你一些启发和关键词。 因为这破事，最近我都无法分享和贡献任何开源代码了。（摊手） 参考资料：http://www.voycn ...
分类：
其他好文 时间：
2021-06-09 10:33:21
阅读次数：
0
前言 当我们使用地图进行开发时，利用已经录制好的轨迹进行轨迹回放来检查导航的准确性是十分常用的手段，并且上一篇已经讲完了关于地图使用时GPS轨迹文件的录制，现在对于安卓系统下使用腾讯导航SDK进行轨迹回放做一个分享 前期准备 腾讯导航SDK依赖于腾讯地图SDK、腾讯定位SDK，具体权限的开通需要去l ...
分类：
其他好文 时间：
2021-06-08 23:27:35
阅读次数：
0
起源： 最近公司在做一个活动的h5页面，在微信内打开时需要进行微信授权，然后后端会重定向到这个页面并且携带了一些参数（openid等）。问题是点击微信的原生分享时，会把携带的这些参数一起分享出去，等于把用户信息泄露了。所以为了解决这个问题，只能实现自定义微信分享的功能，可以自定义分享的地址、标题、图 ...
分类：
微信 时间：
2021-06-08 23:16:48
阅读次数：
0
