一、大数据的来源 1.人类活动 2.计算机 3.物理世界 二、大数据采集设备 1.科研数据 （1）大型强子对撞机 （2）射电望远镜 （3）电子显微镜 2.网络数据 我们可以利用数据中心采集网络中的数据。 三、大数据采集方法 1.科研数据 2.网络数据 爬虫（慎用） 3.系统日志 （1）Scribe是 ...
分类：
其他好文 时间：
2019-09-02 09:29:17
阅读次数：
85
记一次启动故障 Terrasse 2019.08.30 本机使用的是 双系统，今天从 切换成 时出现了 等字样，无图形界面，提示登录后查看系统日志解决问题。 值得一提的是，我最开始差点没登录进去，原因是默认不开启 ，我以前是通过一个自动执行的命令开启的 ，而今天系统启动失败，也就没有这个命令了。另外 ...
分类：
其他好文 时间：
2019-08-30 09:15:07
阅读次数：
164
日志的功能用于记录系统、程序运行中发生的各种事件通过阅读日志，有助于诊断和解决系统故障日志文件的分类内核及系统日志：由系统服务syslog统一进行管理，日志格式基本相似用户日志：记录系统用户登录及退出系统的相关信息程序日志：由各种应用程序独立管理的日志文件，记录格式不统一日志保存位置默认位于：/var/log目录下主要日志文件介绍日志文件类型日志文件目录内核及公共消息日志/var/log/mess
分类：
系统相关 时间：
2019-08-28 21:04:00
阅读次数：
132
大家好，很高兴有这次机会和大家分享一些日志分析方面的心得。金融业日志管理面临着一些共性的问题，日志易在助力数百家大型企业用户建设日志精益化分析体系的过程中，积累了一些经验。借这次直播的机会，和参与本次直播的诸位金融企业相关技术负责人，梳理业务系统日志分析平台的一些架构及分析思路，算是抛砖引玉，希望今后能和大家就日志分析有更加深入的交流。本次分享共分三个部分。第一部分会就金融业日志管理方面的共同面临
分类：
其他好文 时间：
2019-08-20 00:58:19
阅读次数：
99
一、Linux目录结构FHS定义了两层规范：第一层是“/”目录下的各个目录应该放什么文件，例如：/etc目录下放置系统的配置文件，而/bin和/sbin放置程序及系统命令。第二层是针对/user和/var这两个目录的子目录来定义，例如：/var/log下放置系统日志文件等。下面我们简单介绍一下其中常见的子目录及作用。/boot：此目录是系统内核存放的目录，同时也是系统启动时所需文件的存放目录，如v
分类：
系统相关 时间：
2019-08-15 23:02:51
阅读次数：
138
日志文件的分类 （1）内核及系统日志 这种日志数据由rsyslog统一管理，根据其主配文件/etc/rsyslog。conf中的设置决定将内核及各种系统程序信息记录到什么位置 （2）用户日志 用于记录系统用户登陆及退出系统的相关信息，包括用户名，登陆的终端，登陆的时间，来源主机，正在使用的进程操作等 ...
分类：
其他好文 时间：
2019-08-13 20:41:36
阅读次数：
152
首先，打开上面的文件，将后7行注释掉，否则udev规则会触发执行，但会返回失败。 修改后如下： 在/etc/udev/rules.d/目录下新建规则文件98-logcopy.rules 内容如下： ...
分类：
其他好文 时间：
2019-08-11 00:52:21
阅读次数：
101
系统跑业务一段时间，总是发现系统本地莫名奇妙就出现无法解析域名。pingwww.baidu.com等域名总是提示pingrequestcouldnotfindhost手动修改DNS地址为海外8.8.8.8，国内114.114.114.114等dnsIP都没解决。重启系统又能正常使用。第一次以为云服务器系统出问题。万能的重启。后来又出现。查系统日志都没什么实际性的错误。这次，决定彻底解决它。从最开始
错误消息通常是指出哪里出现故障的手段。如果在界面上没有看到错误消息，但仍怀疑有问题，请检查报告和日志。 NetBackup提供了各种报告和日志记录工具， 这些工具可提供错误消息，直接为您指出解决方案。 日志还可显示什么运行良好以及当发生问题时NetBackup正在执行什么操作。 例如，还原操作需要装 ...
分类：
Web程序 时间：
2019-08-05 19:00:55
阅读次数：
138
这篇文章主要介绍了详解Linux中的日志及用日志来排查错误的方法,是Linux入门学习中的基础知识,需要的朋友可以参考下 Linux 系统日志许多有价值的日志文件都是由 Linux 自动地为你创建的。你可以在 /var/log 目录中找到它们。下面是在一个典型的 Ubuntu 系统中这个目录的样子： ...
分类：
系统相关 时间：
2019-07-30 11:18:08
阅读次数：
116
