下文主要给大家带来通过使用filebeat收集MySQL慢查询日志详细步骤，希望这些内容能够带给大家实际用处，这也是我编辑通过使用filebeat收集mysql慢查询日志详细步骤这篇文章的主要目的。好了，废话不多说，大家直接看下文吧。
创新互联公司是一家集网站建设,安国企业网站建设,安国品牌网站建设,网站定制,安国网站建设报价,网络营销,网络优化,安国网站推广为一体的创新建站企业，帮助传统企业提升企业形象加强企业竞争力。可充分满足这一群体相比中小企业更为丰富、高端、多元的互联网需求。同时我们时刻保持专业、时尚、前沿，时刻以成就客户成长自我，坚持不断学习、思考、沉淀、净化自己，让我们为更多的企业打造出实用型网站。
环境介绍：
操作系统版本：CentOS Linux release 7.3.1611 (Core) 64bit
Mysql版本： 5.6.28
Logstash版本: logstash 5.3.0
Elasticsearch版本：elasticsearch 5.3.0
Kibana版本：Kibana 5.3.0
Java版本：1.8.0_121
Mysql版本： 5.6.28及mysql慢日志
[bash]# Time: 170420 1:41:04 # User@Host: root[root] @ [192.168.1.178] Id: 2238895756 # Query_time: 3.887598 Lock_time: 0.000099 Rows_sent: 19 Rows_examined: 19 SET timestamp=1492623664; select * from users_test; # User@Host: root[root] @ [192.168.1.178] Id: 2238895828 # Query_time: 3.161184 Lock_time: 0.000150 Rows_sent: 28 Rows_examined: 28 SET timestamp=1492623664; select * from users_test; # Time: 170420 1:41:12[/bash]
filebeat及logstash配置
filebeat.yml配置文件
[bash]filebeat: prospectors: - paths: - /data/mysql/xxx-slow.log document_type: mysqlslow multiline: pattern: "^# User@Host: " negate: true match: after registry_file: /var/lib/filebeat/registry output: logstash: hosts: ["192.168.1.63:5044"][/bash]
logstash.conf
[bash]input {
beats {
port => 5044
}
}
filter {
grok {
match => [ "message", "(?m)^# User@Host: %{USER:query_user}\[[^\]]+\] @ (?:(?\S*) )?\[(?:%{IP:query_ip})?\]\s*Id: %{NUMBER:id:int}\s+# Query_time: %{NUMBER:query_time:float}\s+Lock_time: %{NUMBER:lock_time:float}\s+Rows_sent: %{NUMBER:rows_sent:int}\s+Rows_examined: %{NUMBER:rows_examined:int}\s*(?:use %{DATA:database};\s*)?SET timestamp=%{NUMBER:timestamp};\s*(?(?\w+)\s+.*)" ]
}
grok {
match => { "message" => "# Time: " }
add_tag => [ "drop" ]
tag_on_failure =>[]
}
if "drop" in [tags] {
drop {}
}
date {
match => [ "timestamp", "UNIX", "YYYY-MM-dd HH:mm:ss"]
remove_field => [ "timestamp" ]
}
}
output {
elasticsearch {
hosts => "192.168.1.63:9200"
manage_template => false
index => "%{[@metadata][beat]}-%{[type]}-%{+YYYY.MM.dd}"
document_type => "%{[@metadata][type]}"
}
}[/bash] 对于以上关于通过使用filebeat收集mysql慢查询日志详细步骤，大家是不是觉得非常有帮助。如果需要了解更多内容，请继续关注我们的行业资讯，相信你会喜欢上这些内容的。