




版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領
文檔簡介
大數(shù)據(jù)導論數(shù)
據(jù)
采
集Filebeat介紹目錄01Filebeat介紹
02Filebeat組成
03工作原理04filebeat.yml文件配置05啟動FilebeatFilebeat簡介Filebeat是本地文件的日志數(shù)據(jù)采集器,作為服務器上的代理安裝,監(jiān)視日志目錄或特定日志文件,并將它們轉(zhuǎn)發(fā)給Elasticsearch或Logstash、kafka等Filebeat是一個輕量級日志傳輸Agent,占用資源少,而且安裝配置也比較簡單,支持目前各類主流操作系統(tǒng)及Docker平臺。Filebeat包含兩個部分:Inputs和Harversters。Inputs:負責管理harvesters和發(fā)現(xiàn)可讀的資源。Harverster:負責讀取日志文件,一行一行的讀,并將讀到的內(nèi)容發(fā)送到輸出管道,一個Harverster對應了一個日志文件。Filebeat組成部分工作原理Filebeat主要通過配置文件filebeat.yml中設置的參數(shù)來實現(xiàn)控制輸入與輸出。1、將日志文件作為filebeat的輸入或者通過inputs配置日志文件的路徑2、filebeat啟動harversters,讀取相關(guān)的日志文件,提取相應的數(shù)據(jù)3、經(jīng)由緩存區(qū),輸出到配置文件中的output配置的輸出端,如logstash。1.log2.log3.logharversters1harversters2harversters3input1緩存區(qū)LogstashFilebeatfilebeat.yml文件配置filebeat的如何工作運行,依賴于filebeat.yml配置文件的參數(shù)文件路徑:filebeat安裝根目錄/filebeat.yml涉及輸入輸出的filebeat配置項有兩個:采集配置輸出配置InputOutputfilebeat.yml文件配置inputs采集配置常用配置type:指定input類型,有l(wèi)og、stdin、redis、tcp、syslog等fields:可以自定義添加字段,到output中去,后續(xù)可以使用這些字段paths:日志文件的目錄filebeat.yml文件配置Outputs輸出配置filebeat支持輸出到多種輸出端1、ElasticsearchOutput:輸出到es里。2、LogstashOutput:輸出到logstash里。3、RedisOutput:輸出到redis里。4、FileOutput:輸出到file里。5、ConsoleOutput:輸出到console里。由于不同的輸出配置參數(shù)不一樣,因此官網(wǎng)提供了默認配置文件,找到對應的Filebeat版本,找到Configure-->output-->輸出端啟動filebeat配置好filebeat.yml文件后運行命令:./
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責。
- 6. 下載文件中如有侵權(quán)或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 鏡子:揭示被忽視的世界歷史
- 大軸徑磁流體密封技術(shù)的發(fā)展與進展
- 《完整的PMC部作業(yè)流程體系》
- 工貿(mào)企業(yè)安全教育培訓
- 林業(yè)文化遺產(chǎn)地感知價值與游客重游意愿關(guān)系研究
- 安全點檢管理制度
- 電力生產(chǎn)必須層層落實安全生產(chǎn)責任制
- 生產(chǎn)安全事故應急預案有哪些
- 某施工企業(yè)委托一家安全生產(chǎn)服務機構(gòu)
- 提升教師家庭教育指導力的心理輔導策略
- 廣東省佛山市2024-2025學年高一下學期6月期末考試 數(shù)學 含解析
- 2025年全國高校輔導員素質(zhì)能力大賽基礎知識測試題及答案(共3套)
- 律師事務所客戶信息保密規(guī)定
- 云南楚雄州金江能源集團有限公司招聘筆試真題2024
- 2025-2030中國動力電池回收利用技術(shù)路線與經(jīng)濟性評估分析研究報告
- 7下期末家長會課件
- 酒店前廳服務流程標準化管理
- 互聯(lián)網(wǎng)行業(yè)產(chǎn)品經(jīng)理專業(yè)顧問聘用協(xié)議
- 農(nóng)業(yè)科技發(fā)展與農(nóng)作物種植管理試題
- 2025年 東北石油大學招聘考試筆試試題附答案
- 警察抓捕教學課件
評論
0/150
提交評論