Java笔记

共 167 篇文章

Hadoop HDFS简介

Hadoop HDFS简介

HDFS是一种设计用于在通用硬件(commodity hardware)上运行的分布式文件系统。最初是作为Apache Nutch网络搜索引擎项目的基础设施而构建的。

Hadoop简介

Hadoop简介

Apache Hadoop是一款用于可靠,可扩展的分布式计算的开源软件。

Logstash6整合Hadoop

Logstash6整合Hadoop

本文是之前elk的后续,故默认已搭建好logstash等elk相关环境。侧重点是Hadoop安装以及其与logstash的Output插件的整合。ELK的搭建可见:ELK实时日志管理-系统搭建

Elasticsearch6基本概念

Elasticsearch6基本概念

Elasticsearch是一个近乎实时的搜索平台。这意味着从索引文档到可搜索文档的时间有一点延迟(通常是一秒)。

logstash6配置文件结构

logstash6配置文件结构

对于要添加到事件处理管道的每种类型的插件,Logstash配置文件都有一个单独的区域(section)。

Logstash6中grok插件的常用正则表达式

Logstash6中grok插件的常用正则表达式

Logstash 内置了120种默认表达式,可以查看patterns,里面对表达式做了分组,每个文件为一组,文件内部有对应的表达式模式。下面只是部分常用的。

ELK实时日志管理-指定JDK

ELK实时日志管理-指定JDK

服务器上默认为非1.8的JDK时,使用5.x的ELK需要指定单独的1.8的JDK才可。后期若能写成脚本,能在脚本中指定的话就不必现在这样麻烦地做入侵式修改了。