Kafka是由Apache软件基金会开发的一个开源流处理平台，由Scala和Java编写。Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者在网站中的所有动作流数据。这种动作（网页浏览，搜索和其他用户的行动）是在现代网络上的许多社会功能的一个关键因素。这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。对于像Hadoop一样的日志数据和离线分析系统，但又要求实时处理的限制，这是一个可行的解决方案。Kafka的目的是通过Hadoop的并行加载机制来统一线上和离线的消息处理，也是为了通过集群来提供实时的消息JDK版本：jdk-...
没事干，写了个自己记录以后直接复制来用，适合centos6.x，如果是其它版本只需要把重启mysql的命令重写下就行了。具体脚本如下#!/bin/bash#author merci#Brute force password for mysql and centos6.xCONF="/etc/my.cnf"NEWPASS="10idccom"sed -i "/skip-grant-tabl...
写下常用脚本，利用EOF子命令来执行后续命令，没事练练手#!/bin/bash#author merciecho "Please input old password"read oecho "Please inpput new password"read necho "Please inpput repassword&q...
1、EOF Shell中通常将EOF与 << 结合使用，表示后续的输入作为子命令或子Shell的输入，直到遇到EOF为止，再返回到主调Shell。 可以把EOF替换成其他东西，意思是把内容当作标准输入传给程序。 回顾一下< <的用法。当shell看到< <的时候，它就会知道下一个词是一个分界符。在该分界符以后的内容都被当作输入，直到shell又看到该分界符(位于单独的一行)。这个分界符可以是你所定义的任何字符串。例...
Iperf是一个网络性能测试工具。可以测试TCP和UDP带宽质量，可以测量最大TCP带宽，具有多种参数和UDP特性，可以报告带宽，延迟抖动和数据包丢失。Iperf在linux和windows平台均有二进制版本供自由使用参数说明：-s 以server模式启动。#iperf -s-c host以client模式启动。host是server端地址。#iperf -c serverip通用参数：-f [kmKM] 分别表示以Kbits, Mbits, KBytes,&n...
之前我们做过linux上的ssh免密登录的笔记，具体可以查看我之前的笔：https://sulao.cn/post/285.html现在在管理多台服务器的场景下，我们给所有机器做免密登录，每台机器都我们将authorized_keys文件分到第二个机器，可以使用命令生成公钥私钥ssh-keygen -t rsa继续将本机的公钥追加到authorized_keys认证文件cat id_rsa.pub >> authorized_keys最后将这个追加过公钥的配置再scp到下一台要操作...
last-a把从何处登入系统的主机名称或ip地址，显示在最后一行。-d指定记录文件。指定记录文件。将IP地址转换成主机名称。-f<记录文件> 指定记录文件。-n<显示列数>或-<显示列数> 设置列出名单的显示列数。-R不显示登入系统的主机名称或IP地址。-x显示系统关机，重新开机，以及执行等级的改变等信息以下看所有的重启、关机记录last | grep rebootlast | grep shutdownhistory列出所有的历史记录...
今天要开始开发移动端APP，移动APP需要跨域来获取接口数据，所以需要我们在nginx下做下配置，相对于apache来说nginx配置更加简单，只需要在网站目录下添加一个文件crossdomain.xml，这个文件名是固定的，内容如下：<?xml version="1.0"?><cross-domain-policy><allow-access-from domain="*" /></cross-domain-policy>...
1.awk命令简介：awk是一种可以处理数据、产生格式化报表的语言，功能十分强大。awk的工作方式是读取数据，将每一行数据视为一条记录（record）每笔记录以字段分隔符分成若干字段，然后输出各个字段的值.2.awk常用的作用格式：awk“样式”文件：把符合样式的数据行显示出来。awk{操作}文件：对每一行都执行{}中的操作。awk"样式{操作}"文件：对符合样式的数据行，执行{}中的操作.3.用例：awk的用法1：awk `/La/` dataf3 ...
自己没事写了个脚本用来收集资源使用情况，为后面的项目做好准备，具体bash如下#!/bin/bash#author Merci#客户端资源使用情况收集#################################检测mailx###################################MAILXISEXIST=`rpm -qa | grep 'mailx'`if [ ! $MAILXISEXIST ]then...