码迷,mamicode.com
首页 >  
搜索关键字:hadoop mapreduce 脚本    ( 66003个结果
【Pytorch基础】Torchvision中transform的脚本化
Transforms从torch1.7开始新增了该特性,之前transform进行数据增强的方式是如下的,i.e. 使用compose的方式: default_configure = T.Compose([ T.RandomCrop(32, 4), T.RandomHorizontalFlip(), ...
分类:其他好文   时间:2021-06-18 19:08:22    阅读次数:0
Linux之Shell编程
3.Shell编程 1.shell是什么 shell是一个命令行解释器,它为用户提供了一个向Linux内核发送请求以便运行程序的界面系统级程序,用户可以用shell来启动、挂起、停止一些程序。 ###2. shell脚本的执行方式 ### 脚本格式要求 1.脚本以#!/bin/bash开头 2.脚本 ...
分类:系统相关   时间:2021-06-18 19:00:06    阅读次数:0
MapReduce(七)InputSplit和HDFS block的关系
InputSplit是block和mapper之间的代理,也即是为mapper提供了一个数据视图。 我们以HDFS的block的大小为128MB举例,当一行日志为130MB(包括行分隔符),这一行数据会被分在两个block中,如果mapper直接读block的话,会读到一个被截断的行日志。这是为什么 ...
分类:其他好文   时间:2021-06-18 18:49:59    阅读次数:0
JavaScript(1)语法基础
JavaScript JavaScript:基于对象和事件触发的弱类型脚本语言。脚本通常以文本保存,只在被调用时进行解释或编译。可以动态增删改HTML标签和CSS样式,动态校验数据。 JavaScript特点: 交互性:存在于所有Web浏览器中,能够增强用户与Web站点和 Web 应用程序之间的交互 ...
分类:编程语言   时间:2021-06-17 17:13:27    阅读次数:0
nGrinder的简单使用
一、组件介绍 1、ngrinder包含Controller、agent 和 monitor 三部分2、Controller提供性能测试的web接口协调测试进程调整和显示测试的统计结果让用户创建和修改脚本3、Agent在代理服务器上加载运行测试进程和线程可以部署多台,提升压测能力最好是能部署在单独的服 ...
分类:其他好文   时间:2021-06-17 17:07:34    阅读次数:0
ubuntu安装配置eclipse+hadoop开发环境(十分详细)+WordCount实例
https://blog.csdn.net/QYmufeng/article/details/79580582 我的环境: 系统平台:Ubuntu14.04TLS(64位) Hadoop环境:Hadoop2.8.3 Eclipse:Neon.2 Release(4.6.2) Eclipse插件:ha ...
分类:系统相关   时间:2021-06-17 17:05:08    阅读次数:0
免费堡垒机-jumpserver
服务安装与启动 官方文档:https://docs.jumpserver.org/zh/master/install/setup_by_fast/ 官方给出的一键安装脚本(注:要求系统内存≥4G): curl -sSL https://github.com/jumpserver/jumpserver ...
分类:其他好文   时间:2021-06-16 17:59:44    阅读次数:0
马哥教育-第十三周
1、解决DOS攻击生产案例:根据web日志或者或者网络连接数,监控当某个IP 并发连接数或者短时内PV达到100,即调用防火墙命令封掉对应的IP,监控频 率每隔5分钟。防火墙命令为:iptables -A INPUT -s IP -j REJECT 根据并发链接数 编写脚本: root@gitlab ...
分类:其他好文   时间:2021-06-16 17:47:42    阅读次数:0
selenium IDE自动化脚本录制
一、简介 他作为firefox浏览器的一个插件存在,依附于firefox浏览器,打开它的录制功能,它会记录你对firefox的操作,并可以回放它所记录的你的操作。类似于QTP的自动录制功能. 二、安装 # 方法一 1.打开firefox 浏览器,进入官方网址:http://seleniumhq.or ...
分类:其他好文   时间:2021-06-16 17:39:22    阅读次数:0
Python爬虫之json动态数据抓取
网络爬虫(又称为网页蜘蛛,网络机器人,在FOAF社区中间,更经常的称为网页追逐者),是一种按照一定的规则,自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。 ...
分类:编程语言   时间:2021-06-16 17:38:24    阅读次数:0
66003条   上一页 1 ... 10 11 12 13 14 ... 6601 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!