01

1月

SSH登录卡在‘Last login‘提示界面

问题如下    最近要对一台服务器做一些操作，以前我也没有登录过，今天要去操作的时候发现 直接卡着 如下图的界面。最开始我以为是网络差，但是等登录进去了之后发现一点都不卡。方案一般出现卡顿就是修改 ssh 配置文件里面的修改 UseDNS  和 GSSAPIAuthentication 为 no。但是这一次发现不行。觉得很奇怪。然后觉得卡半天太烦了，就 操作了 Ctrl + C 。偶然发现居然进去了。然后根据这个操作反推 那应该是执行了什么脚本。一般ssh 登录会默认执行 .bash_profile  .bashrc 。我就打开文件看了看，发现里面真有一个执行shell脚本，关闭搞定。从来没有如此丝滑过

20

10月

logrotate copytruncate 模式滚动切割日志

　　问题        最近我们遇到了一个问题，我们有的Job是常驻的，输出的日志是固定为了，例如如下命令（once.sh 是一个死循环的脚本），这样所有的命令都要输出日志到 notice_wechat.log{ /bin/sh jobs/bin/once.sh notice/wechat ;} >> /data/logs/jobs/notice_wechat.log 2>&1        如果使用默认的logrotate【logrotate基础传送门】的配置，就会重命名然后生产一个新文件，例如 notice_wechat.log_20221020 。但是进程是常驻的，切割之后日志会输出到 notice_we

06

2月

ELK 之 GeoIP

需求    我们都知道nginx日志里面有域名，同时也有用户的远程ip。但是ip其实我们看不出什么东西，我们知道通过ip其实可以查询一些地理位置信息出来的（很多网站都可以直接查的）。这个过程就是GeoIP：就是通过来访者的IP，定位他的经纬度，国家/地区，省市，甚至街道等位置信息。而在logstash里面就有一个解决这个需求的插件：logstash-filter-geoip数据格式    logstash-filter-geoip 本身不用安装，logstash默认已经安装了，如果您的没有安装，可以直接执行安装命令/usr/share/logstash/bin/logstash-plugin install logstash-filter-geoip    该插件有如下信息"geoip" => { &nb

05

2月

ELK 之解析域名的TLD

缘由    我们在大数据数据里面有一类数据是 域名，例如 www.jixuejima.cn ,我们需要把 cn 和 jixuejima.cn 提取处理，这个其实就是TLD（TOP LEVEL DOMAIN）顶级域名解析过程。    大家看过我们前面ELK相关文章的，都知道我们处理过程是 FileBeat -> Redis -> LogStash -> ES 。在 聊聊公司的技术栈  这篇文章中我就说过这个过程，但是肯定很多人很郁闷，为什么不能直接从FileBeat 直接 到 ES。其实就是因为原始数据要结果处理之后才能进入ES，而FileBeat处理能力是有限并且是非常差的（至少我们在使用过程中发现就是这样的一个结果）。解决方案    logstash有很多插件可以用，找了很久发现了一个 ： https://gi

09

12月

CentOS7 搭建ELK日志分析系统过程

ELK简介ELK是什么？    elk是三个开源软件的缩写，分别是：Elasticsearch、Logstash、Kibana 。由于Logstash 客户端太占用资源，对服务器的要求比较高，后来FileBeat出现了 ,解决了资源问题，官方也推荐这个工具。    Elasticsearch：实时全文搜索和分析引擎，提供搜集、分析、存储数据三大功能    Logstash：日志收集，分析，过滤并转化到对应的存储库    Kibana：一个基于Web的图形界面，用于搜索、分析和可视化存储在 Elasticsearch指标中的日志数据    Filebeat：监控日志文件、转发。 需要收集数据的服务器端需要安装这个架构图如上图你可以看出来，FileBeat 将数据 通过队列 发给 Logstas

12

8月

编程浪子我的个人知识树

开场白一转眼工作将近7个年头，时间过得好快哇。年少不懂事，上天惩罚我，婚也结了。不要暗恋哥，哥已是传说。恍恍惚惚过了这么多年，想整理下个人技能树，也提醒下自己我的技能树经常看到各种技能树，那我也来一发，我认为作为一个研发人员，不应该只会自己领域内的东西，不要让自己的路越走越窄。熟话说：技多不压身，有精力就多学点了。如下图（点击打开大图：我要看大图）个人实战过得系统工作这么多年，做过了不少东西，想到就列出来，其他零星小的就不说了个人博客地址：http://www.54php.cn 虚拟化Vagrant ：http://www.54php.cn/default/26.html RBAC：http://www.54php.cn/default/42.htmlYii2打造后台+微信全栈图书商城： http://book.54php.cn/ Python3 + Flask构建微信小程序订餐系统：https://food.54php.cn/ 快速上手Linux 玩转典型

02

7月

tp5, laravel, yii2我该选择哪个

　　为什么写这篇文章我个人有一个技术群，里面学什么框架的都有，经常会有人问 某某功能 在 哪个框架怎么实现，用什么框架实现更好，说道这里我大家讲一个同类型问题的笑话某女:你能让这个论坛的人都吵起来，我今晚就跟你走。某软件工程师:PHP是最好的语言！某论坛就真的炸锅了，各种吵架../..某女:服了你了，我们走吧，你想干啥都行。某软件工程师:今天不行，我一定要说服他们，PHP必须是最好的语言大家注意重点哦（可能有同学会说 活该单身狗 哈哈），这边文章的标题 就和这个语言争论是一样没有最好，只有更适合和语言之争一样，框架一样没有那个最好这种说法，只有更适合。这里的更适合我要给大家解释下。更适合是 你非常了解一个框架 ，一定要注意不是因为你使用过 就一定更适合，因为只有你认证了解过 在出现极端问题才知道怎么解决更适合是 你当前技术栈选择，例如公司大部分人都会Yii2 框架，你说我们选择个tp5，你这不是折腾人嘛，多人的智慧还是可取的更适合是 相对而言 文档比较丰富，不然新人学习成本很高的其实真有最好

01

11月

【Composer】实战操作一：使用库

　　前言前面我们简单介绍了composer的安装 以及 如何安装库本文目的主要实战讲解如何使用库，主要是PSR-0 和 PSR-4的区别，以及如何在代码中引用。关于PSR-0和PSR-4的具体区别可以参考博文 PSR : php编码规范演示代码演示代码都在 https://github.com/apanly/composer_helloworld  中，有兴趣的可以clone实战内容引用资源phpoffice/phpexcelmonolog/monologapanly/browser-detector (本人自己的库，后续会讲解如何创建自己的库) composer.json文件如下{   "require":{     "phpoffice/phpexcel": "1.8.0",    &nbs

10

11月

MySQL：动态开启慢查询日志(Slow Query Log)

前言在开发中，高效能的程序 也包括 高效能的查询，所以优化SQL也是程序员必要技能之一。要优化就必须要有慢日志记录才可以知道哪些查询慢，然后反向去修改慢日志设置方式写入文件写入数据库实践操作方式一：写入文件编辑my.conf 中修改 log_slow_queries 的日志地址$ cd /etc/mysql $ cat my.cnf |grep slow  log_slow_queries = /data/logs/mysql/mysql-slow.log $ sudo /etc/init.d/mysql restart简单验证$ mysql -uroot -p mysql> show variables like '%slow_query_log%'; +----------------

26

7月

【运维工具】logrotate 日志管理神器

　　服务器经常会产生各种各样的日志文件，我们需要定期清理日志的分类系统日志应用日志系统日志例如系统的history 历史信息   crontab的运行日志  一般系统日志系统都帮我们运维好了，不需要额外配置应用日志例如nginx  的access 和 error 日志 ,php框架的运行日志，这些日志是我们排查问题的有力证据工具logrotatelogrotate是什么logrotate是大多数linux系统自带的日志切割工具logrotate的适用场景logrotate常用来切割仍在被写的“动态”文件，它支持 按时间间隔或文件大小 来触发文件的自动切分（automatic rotation）实战按天保存一周的Nginx日志压缩文件，保留30天，配置文件为「/etc/logrotate.d/nginx」最后代码如下（本人ubuntu系统）/data/logs/nginx/*.log {      &nb

09

3月

MetaWeblog 同时管理51cto,csdn,sina,163,oschina,cnblogs等博客

我们技术人一般都会有自己的一个博客，用于记录一些技术笔记，也期望自己的笔记文章可以让更多人知道。如何让更多人知道自己的博客？搜索引擎收录，用户通过关键词搜索可能会进入内容运营，但是一般技术人为了文章做运营的人应该没有几个通过大流量同类型网站导流量我是使用 方法一 和 方法三，方法一就不说了，互联网人都知道了，但是小网站效果不会太好了。方法三就是充当复读机：复制 和 粘贴  到其他技术网站“复制 和 粘贴  到其他技术网站” 收起来容易，这TM就是个体力活呀，谁愿意自己写了一篇文章 再占用半个小时，同步到各个技术网站和论坛。我这次记录的就是如何简单方便的同步管理？MetaWeblog，对就是这个名词，这也是一个协议，我所知道的各大技术网站基本都实现了这个协议，通过这个协议我们就可以向各大技术网站通过接口直接同步博客。作为一个技术人员还是要与时俱进，时刻学习呀，我是偶然有这个想法查阅了一些资料知道了这个协议，但是这个协议于2002年都被提出来了，直到今天才知道，真是羞愧呀

20

1月

apparmor 引起自定义mysql 日志问题

　　今天手贱，看到mysql 的日志在/var/log/mysql下面。总是觉得别扭，于是就想改变日志的位置，本人开发环境 vagrant  + ubuntu12.04 ,在/etc/mysql/mysql中修改了general_log的位置，放在/data/logs/mysql下面然后重启服务，service mysql restart查看错误日志发现说 /usr/sbin/mysqld: File '/data/logs/mysql/mysql.log' not found (Errcode: 13)150830  0:02:44 [ERROR] Could not use /data/logs/mysql/mysql.log for logging (error 13). Turning logging off for the whole duration of the MySQL server process. To turn it on

28

3月

MySQL 常用命令集

　　1.mysqlbinlog工具使用方法如下：先使用 show binary logs 查看在使用导出命令mysqlbinlog -R -uroot -pxxxx -hxxx.xxx.xxx.xxx -d db_name  --base64-output=decode-rows  --start-datetime='2015-08-13 13:11:21'  --stop-datetime="2015-08-13 13:18:21" mysql-bin.000008 > mysql-bin.ran_trade_08_13.sql2.mysqldump使用方法如下：# 备份单个数据库 mysqldump  --skip-opt  -u