https://mp.weixin.qq.com/s?__biz=MzI5MDYxNjIzOQ==&mid=2247494141&idx=1&sn=c6d501c903d385d9cbfc160ae31a25bb&chksm=ec1f8f3ddb68062b312c15cfc5f871c42ca7e4f6621e908717dc509486d6ce9851489c7
1.提示有坏块 2.使用命令检测坏块 hdfs fsck / | egrep -v '^\.+$' | grep -v eplica 3.查看坏块 4.如果坏块下没有重要的数据，删掉即可 [hdfs@dbos-bigdata-work007 ~]$ hdfs dfs -rm -r -skipTras ...
转载
2021-10-21 10:24:00
873阅读
2评论
1.提示有坏块2.使用命令检测坏块hdfs fsck / | egrep -v '^\.+$' | grep -v eplica3.查看坏块4.如果坏块下没有重要的数据，删掉即可[hdfs@dbos-bigdata-work007 ~]$ hdfs dfs -rm -r -skipTrash /group/user/tools/meta/hive-temp-table/test_sony_boot
原创
2021-10-14 16:36:12
1459阅读
继续上次的教程，这次安装hbase与hive。之前有同学反应百度网盘中没有hbase安装包，这次补上了，在上篇博客的网盘链接中已经有了，最详细的Hadoop+Hbase+Hive完全分布式环境搭建教程（一）。一、hbase2.1.1安装在master节点：$ tar -zxvf hbase-2.1.1-bin.tar.gz -C /opt
$ cd /opt/hbase-2.1.1/conf/
$
生产环境 分区做raid
原创
2015-10-10 16:24:25
530阅读
JVM优化的目标就是：尽可能让对象都在新生代里分配和回收，尽量别让太多对象频繁进入老年代，避免频繁对老年代进行垃圾回收，同时给系统充足的内存大小，避免新生代频繁的进行垃圾回收。
原创
2023-08-04 10:50:34
695阅读
在生产环境使用Kubernetes时，可能会遇到一些坑需要小心处理。下面我将为你详细介绍生产环境Kubernetes遇到的一些常见问题以及如何解决这些问题。
首先，让我们来看一下整个处理生产环境Kubernetes遇到的坑的流程：
| 步骤 | 内容 |
|:----:|-----|
| 1 | 创建Kubernetes集群 |
| 2 | 部署应用程序 |
| 3 | 监控和日志管理
K8S生产环境坑
作为一名经验丰富的开发者，我将为您介绍在K8S生产环境中常见的坑并指导如何解决这些问题。
流程步骤如下所示：
| 步骤 | 操作 | 代码示例 |
|-----|--------------|--------------------|
| 1 |创建K8S集群 | kubectl create cluster |
|
消息组接到某项目组反馈，topic 在扩容后出现部分队列无法被消费者，导致消息积压，影响线上业务？考虑到该问题是发送在真实的线上环境，为了避免泄密，本文先在的虚拟机中来重现问题。1、案情回顾1.1 集群现状集群信息如下：例如业务主体名 topic_dw_test_by_order_01 的路由信息如图所示：当前的消费者信息：broker 的配置信息如下：brokerClusterName = De
转载
2021-06-06 12:25:32
119阅读
消息组接到某项目组反馈，topic在扩容后出现部分队列无法被消费者，导致消息积压，影响线上业务？考虑到该问题是发送在真实的线上环境，为了避免泄密，本文先在的虚拟机中来重现问题。1、案情回顾1.1集群现状集群信息如下：例如业务主体名topic_dw_test_by_order_01的路由信息如图所示：当前的消费者信息：broker的配置信息如下：brokerClusterName=DefaultCl
原创
2020-12-03 14:11:35
617阅读
利用Linux自身的crontab定时任务功能，定时执行备份数据库的脚本
文章目录实现功能列表数据备份dump示例shell脚本定时任务crontabcrontab用法:内容解释：
实现功能列表备份定时备份压缩备份文件删除过期备份文件恢复备份文件数据备份dump数据库都有一个导出数据库内数据和结构的命令，就是备份。 将备份的数据还原会将原来的数据中的表删了重建，再插入备份中的数据，这是恢复
# MySQL生产环境备份方案
在MySQL数据库中，备份是非常重要的一项工作，可以保证数据的安全性，避免数据丢失。在生产环境中，我们需要考虑到备份的频率、备份的方式以及备份的恢复性等方面。下面将介绍一种常用的MySQL生产环境备份方案，包括全量备份和增量备份。
## 1. 全量备份
全量备份是指对整个数据库进行完整备份，包括所有数据和表结构。一般情况下，全量备份可以定期进行，比如每天凌晨。
如题，生产环境其实不可怕。回想起来也经历了不少事故，有全表更新错误的，有删表的，有删库的，有 rm -rf /opt 的，删除一个目录不可怕，可关键是所有的应用都在这下面。手一抖就造成了事故，但很多这种情况其实是可以避免的。其实不光是生产环境，很多大公司会把环境分的很细，有生产环境，测试环境，开发环境，灰度环境，预生产环境以及 sa 环境等等。每套环境有每套环境的作用。比如 sa 环境是专门给客户
最近刚遇到个问题，我要给自己做的网站加个无限 debugger 反爬，网站是基于 Vue.js 开发的，比如我就想在 main.js 里面加这么一段： setInterval(() => {
debugger
console.log('debugger')
}, 1000) 当时在 Debug 环境下一切好好的，但是到了 build 之后，再运行发现 debugger 就没了，这
快速搭建开发环境 - Istio(最新版本)关键词：istio、istio基础、快速搭建istio环境 文章目录快速搭建开发环境 - Istio(最新版本)前言一、Istio 概述二、Istio 优势三、搭建 Istio 环境准备工作硬件环境软件环境离线搭建 istio总结 前言 一、Istio 概述Istio是一个开放平台，用于提供一种统一的方式来集成微服务、管理跨微服务的流量、执行策略和聚合遥
以前自己写过一个开源的项目，没部署到线上环境，借此机会熟悉下线上部署的流程1、Linux上安装数据库MySQL，创建一个数据库database 名 Mxonline2、使用远程工具 Navicat Premium 登录Linux数据库上，并把本地已经跑好的数据库表同步传输到 Mxonline上 3、数据库传输好后，在Linux上搭建Python的虚拟环境在L
大多公司在部署服务时，因为Windows上服务过多，内存，CPU占用过高时，服务会出现假死，或者挂掉等情况，因此，没有特殊情况，首选都是在Linux上部署服务，下面将以VM演示生产环境Linux的安装。首先，通过VMware创建虚拟机，若是第一次或者新手刚玩VM虚拟机，可以找找别的教程学学怎么创建虚拟机，这里直接演示Linux安装。开启虚拟机后，进入安装界面，此时如图有两个选择： 第一个选项是直
转载
2023-07-05 11:30:16
128阅读
1. git代码分支管理 DEV SIT UAT PET PRE PRD PROD常见环境英文缩写含义英文缩写英文中文DEVdevelopment开发SITSystem Integrate Test系统综合测试（内测）UATUser Acceptance Test用户验收测试PETPerformance Evaluation Test性能评估测试（通常叫压力
转载
2023-07-29 14:57:39
443阅读
目录一、开发环境二、测试环境三、准生产环境四、生产环境五、预发布环境、灰度发布、生成环境又和不同在一个项目开发到发布的整个过程中，会使用到很多个环境进行测试和运行项目。最基本的开发环境、测试环境、准生产环境、生成环境一、开发环境开发环境顾名思义就是我们程序猿自己把项目放到自己的电脑上，配置好以后，跑起来项目，然后我们在这个基础上来进行开发，这个开发环境就是方便我们程序猿来开发功能，调试Bug的。二
