Zhang Phil

实时监控文件内容行数据变化，基于Python yield句法。

Elasticsearch默认的http访问端口就是熟知的9200，在新版的Elasticsearch（如8.3.3），如果Elasticsearch启动时候，9200端口已经被占用，Elasticsearch会自动占用9201端口。Elasticsearch端口配置。

Python获取当前主机(本地计算机)IP地址。

1)首先假定已经启动logstash，Elasticsearch，Kibana。并且已经安装部署metricbeat，本文均基于8.3.3版本。提示：xpack.monitoring.collection.enabled is set to false。（a）logstash配置output输出到Elasticsearch，启动。总览，节点详情统计图表，数据上报流水线，均可点进去查看。（b）Elasticsearch启动。这一步，直接点进蓝色按钮。（c）Kibana启动。.........

program_retry()返回的值进入is_value()函数处理，只有当is_value()函数返回值为True时候才重试，如果is_value()返回为False，则停止重试。上面代码发生异常后，等待2秒的基础上再加上1到3秒之间随机时间总和后重试。以上代码，发生异常后，等待最少2秒，最多5秒的随机时间后重试。上面代码发生异常错误重试2秒后结束重试。上面代码发生异常重试3次后结束重试。上面代码重试3次或者重试2秒后结束。以上代码发生异常后，等待3秒重试。发生异常重试若干次后退出。......

新版(8.3.3)metricbeat，如果默认的es和kibana都是默认配置，那么上述命令执行后，就可以在kibana上看到有metricbeat的数据了。（2）下载其中的Windows zip压缩文件，解压到一个目录。通过Windows命令cd到metricbeat.exe的目录下。预览当前的metricbeat包含有多少组件。安装部署启动Metricbeat，Windows。......

反过来说，这个event在2D的平面坐标系可以分解为x坐标轴的时刻t=2022-07-31234512落入的区间（23,24），t=2022-07-31234512在y坐标轴分解落到星期日。因为t=2022-07-30234512这一个时间点，当天是星期日，具体的时间区间为（23，24），23点到24点。如果有很多这样的时刻，那以为着某些点上会重复出现，比如x=(23,24)，y=星期日，可能这样的点出现次数若干次为n，那么可以在平面坐标上把这些点圆形大小以n为直径绘制出来。.........

字典(JSON)数据写入文件并换行，Python。

日志数据提取包含关键词的事件，解析落入的月份计数，matplotlib绘制统计图，python。日志数据提取事件关键词，解析对应日期的星期计数，matplotlib绘制统计图，python。在此基础上，对代码修改，以月为维度，统计包含关键词事件落入的月份。.........

Android安装apk失败TheapplicationcouldnotbeinstalledINSTALL_FAILED_TEST_ONLY。通常会发生在国产手机厂商的手机上，原因是国产手机厂商把属性为debug的app取消安装权限。

日志数据提取事件关键词，解析对应日期的星期计数，matplotlib绘制统计图，python。日志数据提取事件关键词，解析对应时间点计数，matplotlib绘制统计图，python。根据星期时间统计日期总量，绘制图表，pandas，matplotlib，Python。这次把日志数据中每一行包含关键词的日期对应的星期计数，绘制统计图表。...

如果成功，会在工程下面生成/dist文件夹，文件夹下生成了对应代码程序文件名对应的文件夹，里面的同程序文件名.exe即为最终打包可执行文件。使用pyinstaller。如果当前环境下没有安装pyinstaller库，则通过。Python实现一个简单的功能Windows锁屏，并打包成exe文件发布。......

根据星期时间统计日期总量，绘制图表，pandas，matplotlib，Python。

有时候需要通过Python启动一个Windows下的.bat文件，并在启动时候加入一些命令选项，比如典型的网络ping命令等。假设现在已经在Windows下写好了一个.bat文件，需要由Python启动，由Python接管这个.bat启动的进程，并在某些时机下关闭这个进程。上面代码在启动一个.bat文件后，等待3秒再将这个.bat文件启动的进程kill掉。Python启动Windowscmd（.bat）命令行并关闭进程。...............

把不同的时分时间划入到不同时间段，统计每个时间段出现时间点的次数，比如2112划入到（21,22）这个时间段，同时给（21,22）这个时间段计数为1，如果再出现一个时间点2102，那么2102仍划入到（21,22）时间段，并为（21,22）增加1次计数，变为2。用Python实现一个功能，把一个时间划入到不同的时间范围内，比如2305，把这个时间划入到(23,24)区间内。又比如056，划入（0,1）范围内。时分时间点划入不同区间分类（时间段），统计每个时间段出现次数，Python。......

logstash对外提供了一些监控自身运行状态的httpapi接口。当logstash启动运行后，通过http请求即可访问。

dateutil不能直接匹配中文，这里的策略是把日期时间中的中文字符删掉，合并成一条连续的数字字符串，然后交给dateutil匹配。Python日期时间通用匹配工具dateutil，匹配中文。

2）因为数据文件中的行数据时海量的，也意味着高价值事件很多，同样，这条事件对应的时间点也很多。需要把事件发生时间划入到不同的时间段（时间区间），比如（11，12）代表11点到12点，（1，2）代表凌晨1点到2点。（1）数据文件中，对每一行数据模糊查找是否包含了所要寻找的关键词，如果该行以一定的概率（>80%可能性）存在目标关键词，那么该行即为认定为目标高价值数据事件行，然后再从该行中提取事件时间点。比如（9，10），计数5，表示发生再9点到10点（不包含10点）的事件为5件。...............

把不同时间点（时刻）划入不同时间段，然后统计每个时间段的时间点（时刻）总量，最终把数据放入到pandas数据帧，然后用matplotlib对pandas数据绘图。时间点归入不同时间段分类，统计不同时间段数据量，matplotlib绘图排名，Python。............

原因是在open()文件时候，没有带解码格式。