将图像翻译成文字一般被称为光学文字识别（Optical Character Recognition，OCR） OCR库：Pillow、Tesseract、NumPy Pillow Pillow可以对图片进行预处理，比如图片背景色不是纯白，而是渐进色，那么就可以利用Pillow进行预处理得到相对清晰的 ...
分类：
其他好文 时间：
2018-02-06 11:38:38
阅读次数：
177
一、ORC File文件结构 ORC的全称是(Optimized Row Columnar)，ORC文件格式是一种Hadoop生态圈中的列式存储格式，它的产生早在2013年初，最初产生自Apache Hive，用于降低Hadoop数据存储空间和加速Hive查询速度。和Parquet类似，它并不是一个 ...
分类：
其他好文 时间：
2017-10-16 19:43:52
阅读次数：
402
在爬取网站的时候都遇到过验证码，那么我们有什么方法让程序自动的识别验证码呢？其实网上已有很多打码平台，但是这些都是需要money。但对于仅仅爬取点数据而接入打码平台实属浪费。所以百度免费orc正好可以利用。（每天500次免费） 1、注册百度账号、百度云管理中心创建应用、生成AppKey、Secret ...
分类：
其他好文 时间：
2017-09-03 22:17:35
阅读次数：
1539
竟然还很好玩,不过我敏捷都为负了还可以来一击紧张刺激的stabe ...
分类：
其他好文 时间：
2017-09-01 18:54:22
阅读次数：
161
后台使用orc 数据库...对于没有赋值的字段,会返回<null> 直接使用苹果自带的kvc 去将数据转模型,,会crash [model setValuesForKeysWithDictionary:dataDic]; 虽然后台也会尽量避免传回<null> ,但是作为程序员应该严谨对待每一个可能崩 ...
分类：
其他好文 时间：
2017-08-30 00:50:38
阅读次数：
389
随后用dfs命令查看user1的表目录。可见有000000_0文件。删除后表中无数据。重新填充数据准备后续实验。 创建了user1_0和user1有相同的列定义，都存成orc格式。 将user1表目录中的文件copy到user1_0表。则user1_0表也有了数据。由此了解orc表和表目录下文件的关 ...
分类：
其他好文 时间：
2017-08-24 00:03:12
阅读次数：
125
http://dongxicheng.org/mapreduce-nextgen/columnar-storage-parquet-and-orc/ 相比传统的行式存储引擎，列式存储引擎具有更高的压缩比，更少的IO操作而备受青睐（注：列式存储不是万能高效的，很多场景下行式存储仍更加高效），尤其是在数 ...
分类：
其他好文 时间：
2017-08-14 19:05:31
阅读次数：
165
hive上可以使用多种格式，比如纯文本，lzo、orc等，为了搞清楚它们之间的关系，特意做个测试。一、建立样例表hive>createtabletbl(idint,namestring)rowformatdelimitedfieldsterminatedby‘|‘storedastextfile;OKTimetaken:0.338secondshive>loaddatalocalinpath‘/home/g..
分类：
其他好文 时间：
2017-06-29 17:59:25
阅读次数：
151
说明：同样数据的两个orc表，分别模拟一个月120亿wifi数据，平均每日4亿数据。 字段：id 唯一标记 mac mac地址 point 点位 x x坐标 y y坐标 hour 数据时间-小时 day 数据时间-日期 区别： 表1：wifi_orc 以day作为一级分区，hour作为二级分区 表2 ...
分类：
其他好文 时间：
2017-06-28 20:22:30
阅读次数：
200
背景： 11g R2 rac 的orc ,voting disk asm存储磁盘全部损坏。通过调查得知 损坏的 OCR磁盘对应为 VOL1 ，voting disk磁盘对应于 VOL2 。 故，添加asm新存储（过程省略），设置为旧配置名 VOL1，VOL2 。 /usr/sbin/oracleas ...
分类：
其他好文 时间：
2017-02-21 00:54:11
阅读次数：
245
