System Scheduler代替Windows自带的计划任务https://www.splinterware.comFreeFileSync数据同步软件，改造成bat执行启动，用来自动同步数据https://freefilesync.org/Cloudberry S3 ExplorerS3客户端连接软件https://www.msp360.com/explorer/windows/Cyberd
未完待续...........csvdiff 检查两个csv某列的不同，例如序列号pip install csvdiffcsvdiff --style pretty serial_no d:\test\1.csv d:\test\2.csv
删除超过30天的文件和文件夹sudofindFolder\-mtime+30-execrm-rf{}\;
删除超过33天的文件ForFiles/p"G:\Ensky\Jaeger\FATP"/s/d-33/c"cmd/cdel/Q@file"Pendinghowtoremoveemptyfolder?Ifadd/safterdel/Q/S,willdeleteallthefilesinsubfolder.同步NTP时间C:\Users\sim>nettim
因为安全原因，需要从8.0.39升级到8.0.40apt upgrade提示已经是最新版因此需要手工添加mysql的apt源wget https://repo.mysql.com//mysql-apt-config_0.8.33-1_all.deb sudo dpkg -i mysql-apt-config_0.8.33-1_all.deb sudo apt update sudo apt in
汇总记录各种奇特的windows手工更新1.- Microsoft Windows Secure Kernel Mode Elevation of Privilege VulnerabilityPlease refer to this advisory page for more information and updates on this Vulnerability; [CVE-2024-21
curl.exe提示安全警告，需要更新：https://curl.se/docs/CVE-2024-7264.html此文件位于：C:\Windows\System32查了一些资料说windows更新的时候会自动将此文件更新，但是查了本机上的却没有，还是老版本想着最简单的方式就是下载新版然后替换即可，但是网上有说手工更新后导致windows update无法工作，因此只会自己测试。首先去下载新版：
突然间Kibana无法登陆了，确定用户名密码是正确的，可就是提示：We couldn't log you in. Please try again.网上查了一下，说有一种可能是磁盘空间不足，检查了一下，发现空间还是有一点的于是去查查kinana的log，有time out的问题，但是看不懂具体是什么意思再查elasticsearch log，这里就清楚说明了问题，超过disk 90%了扩充磁盘空间
因为安全补丁或者小升级的原因，需要更新zabbix server和agent，可以使用如下方式。sudo apt update upgrade Zabbix minor version, run: sudo apt install --only-upgrade 'zabbix*' To upgrade Zabbix server minor versio
根据序列号特征抽出需要的数据，然后将数据中其中一个栏位的值从1修改为0第一步：从DB中获取需要修改的数据，选择Table input第二步：选择需要修改的栏位和设置需要改成的值，选择Set field value to a constant，这里将值设为 0第三步：将结果写回DB，选择Update，此组件将只会更新值而不会插入The key to look up the value, 是作为对比指
hMail 默认DB是MSSQL Server Compact 3.5根据业务需要修改为MySQL1.- 下载安装MySQL：https://dev.mysql.com/downloads/mysql/需要先安装VS C++Redistributable :https://learn.microsoft.com/en-us/cpp/windows/latest-supported-vc-redis
在旧版本的windows上执行powershell命令时，时不时出现一些奇怪的问题，常要花不少时间去摸索解决，现记录如下。Windows Server 2012 R2安装PowerShell 5https://download.microsoft.com/download/6/F/5/6F5FF66C-6775-42B0-86C4-47D41F2DA187/Win8.1AndW2K12R2-KB3
查看服务器log的时候，发现有好多warning信息，发现有外部机器尝试连接服务器，而服务器实际上已经是在网络防火墙的保护下了，但此防火墙是第三方管理，却依然有远程威胁，因此启用防火墙阻挡和自动阻挡黑名单
注意，这里的URL, 使用端口8220，不是443curl -L -O https://artifacts.elastic.co/downloads/beats/elastic-agent/elastic-agent-8.15.1-linux-x86_64.tar.gztar xzvf elastic-agent-8.15.1-linux-x86_64.tar.gzcd elastic-agent
sudo apt install default-jrecurl -fsSL https://artifacts.elastic.co/GPG-KEY-elasticsearch |sudo gpg --dearmor -o /usr/share/keyrings/elastic.gpgecho "deb [signed-by=/usr/share/keyrings/elastic.gpg] ht
内网的机器无法直接访问外网，只好搭建一个代理服务器作为中转，查了一下觉得squid简单好用，因此装了起来。sudo apt install squid完成后如果只是为了让其能工作，配置几个简单的参数即可服务端口：http_port 3128运行使用proxy的列表：acl localnet src 192.168.1.0/24或者全开：acl all src 0.0.0.0/0运行访问外
内网里有一些机器无法使用外网，这样设定邮件报警的时候内部需要搭建一个邮件中继服务器来转发，查询后发现postfix在ubuntu下比较友好，摸索了一轮，测试成功，记录如下。1.- 安装postfixsudo apt install postfix弹出对话框选择：Satellite system接着domain，选择默认即可SMTP relay host，填写SMTP服务器IP2.- 完成后编辑配置
1.- 进入需要创建的host，点Items --> Create itemName: 自己定义Key：选择net.tcp.port[127.0.0.1,端口号]完成后点Test点Get Value，成功的话，返回值是 1返回，然后点Add保存然后点Triggers，创建触发报警条件Name：自定义Severity：Disaster然后点Add选择刚才创建的Item名字，Result=0，表
Dolphin Scheduler虽然相对稳定，但是偶尔还是会挂掉，[WARN] 2024-08-27 19:42:51.689 +0000 org.apache.dolphinscheduler.server.worker.task.WorkerHeartBeatTask:[101] - [WorkflowInstance-0][TaskInstance-0] - current cpu lo
系统默认了监控的Rules但是仍然需要设定阈值才能触发细化的告警，例如监控CPU随时间变化而不断升高的情况，此时就需要到Resource Monitor下的Performance里面设定根据自己的需要，选择相应的监控项作为KPI：Disk I/O > 80%SMB CPU utilization > 60%System memory utilization > 80%System
Dolphin Scheduler使用一段时间后，系统会产生大量log，而系统并没有一个功能去清理，因此需要自己定义。1.- 清理日志文件，这个日志文件随时间推移非常占空间，可通过自定义脚本，然后通过crontab定时任务删除，具体如下：find /root/dolphinscheduler-3.2/master-server/logs/ -type f -mtime +30 -delete -p
sudo add-apt-repository ppa:serge-rider/dbeaver-cesudo apt updatesudo apt install dbeaver-ce这样完成后，即可在Apps里看到DBeaver图标。
HTTPS不启用的话，很多功能无法使用，例如启用Fleet之后，我在客户机安装agent，却始终无法enroll，提示：fail to enroll: fail to execute request to fleet-server: fail to read original error: read tcp 172.30.2.196:33106->172.30.2.108:8220: rea
除了AWS的EC2，自己拥有的物理机器，也可以通过System Manager进行管理和设置远程访问，具体步骤如下：1.- 创建SSMServerRoleIAM --> Role --> Create role2.- 打开CloudShell，输入如下命令ws ssm create-activation --default-instance-name Supp --descriptio
打开Kibana页面默认没有Server IP，也无法从页面上修改需要修改 /docker-elk/kibana/config/kibana.yml然后重新启动Elastic Stacksudo service docker restart等服务器启动完成后刷新页面就能看到变化Fleet --> Agents --> Add Fleet Server复制内容，然后到要安装激活
参考：https://github.com/deviantony/docker-elkgit clone https://github.com/deviantony/docker-elk.gitcd docker-elkdocker-compose up setupdocker-compose up然后打开浏览器 http://ip:5601默认用户名：elastic密码：changeme
提示：EFI Shell version 2.4 [5.11]map: Cannot find required map name.具体如下：查询后说可能是硬盘问题，因此启动时进入BIOS检查发现无法检测到硬盘，因此将硬盘拆下，接入移动硬盘线再接电脑，发现也无法检测到，因此初步判定硬盘坏了，这周SSD硬盘损坏的情况还是第一次遇到。
OS：Ubuntu Server 22.04启动时跑脚本有4种方式，此处以route.sh为例子1.- 加入crontab@reboot /root/route.sh2.- 创建并将.sh文件添加到文件 /etc/rc.local3.- 将route.sh文件添加到文件夹 /etc/init.d/4.- 创建服务并让服务启动时执行.sh文件，/etc/systemd/system/myroute.
同样是为了copy数据，S3 replication只支持bucket to bucket，但是不支持S3文件夹级别的同步，因此采用datasync来解决这个问题进入DataSync -- > Tasks -- > Create task设定源S3文件夹设定目标S3文件夹设定同步频率，最快是每小时同步一次
S3 Replication进入需要同步的S3，Management -- > Create replication rule需要enable versioning选定需要同步的S3 bucket，指定接收方的aws账户id和bucket保存后即设定完成第二步到接受方账户的S3下设定接收规则Management -- > Action -- > Receive replicate
Copyright © 2005-2024 51CTO.COM 版权所有 京ICP证060544号
