#Flume# Flume日志采集框架一些知识

#Flume# Flume日志采集框架一些知识
一、简介 1.1、介绍 Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。 Flume可以采集文件,socket数据包等各种形式源数据,又可以将采集到的数据输出到HDFS、hbase、hive、kafka等众多外部存储系统中 一般的采集需求,通过对flume的简单配置即可实现 Flume针对特殊场景也具备良好的自定义扩展能力,因此,flume可以适用于大部分的日常数据采集场景 1.2、运行机制 Flume分布式系统...

nginx post 405 not allowed

nginx post 405 not allowed
异常:nginx post 405 not allowed,nginx默认是不允许对静态文件执行post 出现原因:Apache、IIS、Nginx等绝大多数web服务器,都不允许静态文件响应POST请求,否则会返回“HTTP/1.1 405 Method not allowed”错误 解决方案: error_page 405 = $uri; 即可正常响应!  

dpkg -i 依赖包异常

dpkg -i 依赖包异常
在使用sudo dpkg -i 安装deb包后,会出现依赖包关系而不能正常安装软件,这个时候先更新下源然后解决依赖关系后重装即可。[ubuntu dpkg异常] # 更新 sudo apt-get update # 解决依赖关系 sudo apt-get -f install # 重新安装 sudo dpkg -i xxx.deb  

docker与firewalld引发异常

docker与firewalld引发异常
问题:Docker运行时,安装firewalld后异常?Docker无法访问网络firewalld?docker与firewalld引发异常? 解决方案:CentOS-7 中介绍了 firewalld,firewall的底层是使用iptables进行数据过滤,建立在iptables之上,这可能会与 Docker 产生冲突。 当 firewalld 启动或者重启的时候,将会从 iptables 中移除 DOCKER 的规则,从而影响了 Docker 的正常工作。 当你使用的是 Systemd 的时候, firewalld 会在 Do...

mongodb数据库帮助(常用操作)

mongodb数据库帮助(常用操作)
mongodb数据库帮助(常用操作) # #mongodb db的一些操作: # db.AddUser(username,password) 添加用户 db.changeUserPassword(username,password); 修改密码  db.auth(usrename,password) 设置数据库连接验证 db.cloneDataBase(fromhost) 从目标服务器克隆一个数据库 db.commandHelp(name) returns the help for the command db.copyDatabase(fromdb,todb,fromhost) ...

mongodb数据库操作(备份,还原,导出,导入)

mongodb数据库操作(备份,还原,导出,导入)
mongodb数据库操作(备份,还原,导出,导入) 一、备份mongodb数据库: mongodump -h IP --port 端口 -u 用户名 -p 密码 -d 数据库 -o 文件存在路径 如果没有用户谁,可以去掉-u和-p。 如果导出本机的数据库,可以去掉-h。 如果是默认端口,可以去掉--port。 如果想导出所有数据库,可以去掉-d。 二、还原mongodb数据库: mongorestore -h IP --port 端口 -u 用户名 -p 密码 -d 数据库 --drop 文件存在路...

检查网站是否支持http2

检查网站是否支持http2
检查网站是否支持http2 (function(){ // 保证这个方法只在支持loadTimes的chrome浏览器下执行 if(window.chrome && typeof chrome.loadTimes === 'function') { var loadTimes = window.chrome.loadTimes(); var spdy = loadTimes.wasFetchedViaSpdy; var info = loadTimes.npnNegotiatedProtocol || loadTimes.connectionInfo; // 就以 「h2」作为...

百度图片真实地址解密

百度图片真实地址解密
百度图片真实地址解密,百度图片搜索真实地址解密,图片爬虫地址解密 Python版示例代码: str_table = { '_z2C$q': ':', '_z&e3B': '.', 'AzdH3F': '/' } char_table = { 'w': 'a', 'k': 'b', 'v': 'c', '1': 'd', 'j': 'e', 'u': 'f', '2': 'g', 'i': 'h', 't': 'i', '3': 'j', 'h': 'k', 's': 'l', '4': 'm',...

No module named MySQLdb (python exception)

No module named MySQLdb (python exception)
python导入包MySQLdb异常: ImportError: No module named MySQLdb 解决方案: Ubuntu 14, Ubuntu 16, Debian 8.6 (jessie): sudo apt-get install python-pip python-dev libmysqlclient-dev sudo pip install MySQL-python Fedora 24: sudo dnf install python python-devel mysql-devel redhat-rpm-config gcc sudo pip install MySQL-python Centos 6, Centos 7: yum install MySQL-python -y ...

yum/apt-get安装mongodb(3.4)和开启用户认证

yum/apt-get安装mongodb(3.4)和开启用户认证
yum/apt-get安装mongodb(3.4)和开启用户认证 一、创建文件/etc/yum.repos.d/mongodb-org-3.4.repo: [mongodb-org-3.4] name=MongoDB Repository baseurl=https://repo.mongodb.org/yum/redhat/$releasever/mongodb-org/3.4/x86_64/ gpgcheck=1 enabled=1 gpgkey=https://www.mongodb.org/static/pgp/server-3.4.asc 二、sudo yum install -y mongodb-org 三、防火墙开放27017端口,然后编辑配置/etc/...
Copyright © C/C++程序员之家 保留所有权利.   Theme  Ality 浙ICP备15011757号-3

用户登录