生产环境版本 Hive: 1.2.1, Spark: 2.3.2 1.insert overwrite directory 不会覆盖数据 注意，生成结果是目录，生成目录里面的不同文件名不会被覆盖，因此很容易出现数据double或者没有覆盖到数据的问题，比如数据分片原始结果如下： /mytable/0 ...
转载
2021-01-25 00:46:00
102阅读
2评论
很多印刷企业实施了ERP和MES系统后，发现生产管理方面依然存在很多问题，通过与大量的印刷企业沟通交流，我们总结了10个比较有代表性的问题：
交货准时率低，生产周期长；
订单交期无法精准应答；
计划、跟单、统计等生产辅助人员臃肿；
依靠EXCEL，采用主计划、车间、班组多级排程模式，工作量大，效率低；
计划粗放，计划应变能力差，插单频繁，插单后不能预知后果。
生产节拍紊乱：停工等版、等料，后工
原创
2021-08-24 17:07:50
251阅读
最近总结一波面试问题(包括python，MySQL，大数据等，一个人力量有限)，有兴趣查看 github1.数据倾斜的产生和解决办法？数据倾斜以为着某一个或者某几个 partition 的数据特别大，导致这几个 partition 上的计算需要耗费相当长的时间。在 spark 中同一个应用程序划分成多个 stage，这些 stage 之间是串行执行的，而一个 stage 里面的多个 ta
问题一：日志中出现：org.apache.spark.shuffle.MetadataFetchFailedException: Missing an output location for shuffle 0原因分析： shuffle分为shuffle write和shuffle read两部分。 shuffle write的分区数由上一阶段的RDD分区数控制，shuffle read的分区数则
在我们日常工作中，油井设备的使用频率越来越高，对其可靠性、安全性要求相对较高。然而，随着生产自动化程度的提高，导致生产流程越来越复杂和不可控，特别是在生产的不同阶段中，影响油井设备运行的因素有很多。油田生产过程中，由于井筒内存在着不同程度的缺陷，会产生各种问题。这些缺陷会使井筒内产生污染，影响井筒使用寿命，甚至造成事故；也会给油井作业带来一定影响，甚至造成重大事故。而井筒中存在不良缺陷和常见故障是
摘要：本文系统分析了铸造厂ERP系统的各个功能模块，并利用Delphi6.0和数据库SQL Sever7.0在Windows2000 Server平台上开发出了基于C/S模式的铸造厂ERP系统的设备管理部分。其中后台数据库部分是用的SQL Server 7.0数据库系统。前端维护管理部分是用的Borland公司的Delphi 6.0。数据连接采用Delphi6.0的ADO控件集和DataAcces
为什么使用CompletableFuture业务功能描述：有一个功能是需要调用基础平台接口组装我们需要的数据，在这个功能里面我们要调用多次基础平台的接口，我们的入参是一个id，但是这个id是一个集合。我们都是使用RPC调用，一般常规的想法去遍历循环这个idList，但是呢这个id集合里面的数据可能会有500个左右。说多不多，说少也不少，主要是在for循环里面多次去RPC调用是一件特别费时的事情。我
原创
精选
2022-11-15 10:03:05
907阅读
制造型企业生产过程中存在着各种管理上的问题，具体如下：
1、 能否根据产品号码追溯这批产品的所有生产过程信息？
2、 同一条生产线需要混合组装多种型号产品的时候，能否自动校验和操作提示,以防止部件装配错误、产品生产流程错误、产品混装和货品交接错误？
3、 过去12小时之内生产线上出现最多的5种产品缺陷是什么？次品数量各是多少？能否及时纠正？
4、 目前仓库和前工序、中工序、后工序线上
原创
2009-08-11 12:37:12
327阅读
1）Zabbix监控界面报错Lack of free swap space on Zabbix server”解决公司线上部署的zabbix3.0的监控界面首页报错说无交换内存主机“Lack of free swap space on Zabbix server”解决此问题的步骤如下： 选择Configu
原创
2018-05-04 11:23:25
6994阅读
点赞
## Java生产中死锁案例
在Java开发中，死锁是一个常见的问题，尤其在多线程编程中更容易出现。当两个或多个线程互相等待对方释放资源，导致彼此永远无法继续执行下去时，就会发生死锁。本文将介绍一个简单的Java死锁案例，并分析如何避免和解决死锁问题。
### 死锁案例
假设有两个线程A和B，它们分别需要两个资源a和b才能继续执行。如果线程A先获得资源a，然后等待资源b，同时线程B先获得资源
作者|Bruce H. Cottman, Ph.D. 编译|VK |Towards Data Science 产品生命周期 在过去两年半的工作中，我们开发和维护了几个自然语言处理项目。我们为每个项目中的每个版本控制中心创建了Docker镜像：Dev、Test和Stage。我将详细介绍Docker
转载
2020-09-29 23:58:00
193阅读
2评论
smt贴片加工中会用到很多种设备，如：锡膏印刷机、AOI、回流焊等设备，其中最为关键的就是smt贴片机，smt贴片机是整个smt生产中关键、复杂的设备。smt贴片机已从早期的低速机械贴片机发展为高速光学对中贴片机，并向多功能、柔性连接模块化发展。今天，英特丽来聊聊贴片机吧！一、贴片机分类1、按速度分为中速贴片机、高速贴片机、超高速贴片机；2、按功能分为：高速/超高速贴片机：主要以贴片式元件为主体，
原创
2023-08-11 15:18:32
112阅读
—1—P（计划阶段）在计划阶段中的主要任务是找出企业生产现场中所存在的各种问题，通过分析，制定相应的改进目标，从而确定达到这些目标的措施和方法。主要从以下三个步骤开展工作。1.1 分析现状，找出存在的问题在没有引入PDCA循环之前，车间的现场存在的主要问题有：一是物料、生产用具等随意摆放，到处可见，给人第一感觉是乱；二是现场使用的设备锈迹斑斑，油污点点，厂房死角处的卫生更是杂物横生，给人第一感觉是
1. RDD如何持久化数据?有两种方法可以持久存储数据，比如持久存储 persist()和cache() 临时存储在内存中。有不同的存储级别选项，比如MEMORY_ONLY、MEMORY_AND_DISK、DISK_ONLY等等。persist() 和 cache() 使用不同的选项取决于任务的要求。 2. 在Yarn上运行Spark时，是否需要在Yarn cluster的所
编辑/etc/profilevim /etc/profile
export HISTTIMEFORMAT="%F %T `whoami`"
保存退出
source /etc/profile测试：敲history命令，会如下面内容一样显示：（什么时间，哪个用户，操作了哪些命令） 365 2017-02-12 00:08:
原创
2017-02-11 16:15:09
535阅读
【生产中pmp什么意思】—— 深入解析PMP认证及其考试
在项目管理领域，PMP认证已成为行业标准，展现了项目管理专业人士的知识与能力。那么，在生产环境中，PMP又意味着什么呢？本文将全面解析PMP认证的意义、考试内容、维护认证等方面，以助您更好理解这一权威认证。
一、PMP认证在生产环境中的意义
在生产环境中，有效的项目管理能够优化资源配置，提升生产效率，降低成本并减少风险。PMP认证对于
# 在生产环境中部署Redis
## 概述
在生产环境中部署Redis是一个常见的任务，使用Docker可以简化这个过程并且提供更好的可维护性。本文将指导你如何使用Docker部署Redis到生产环境中。
## 流程概要
下面是整个部署过程的步骤概要：
| 步骤 | 描述 |
| --- | --- |
| 1 | 创建一个Dockerfile用于构建Redis镜像 |
| 2 | 构建Re
农业对你今天的生活有什么影响？如果你住在城市里，你可能会觉得你与生产食物的农场和田地没有多大联系，但是农业却是我们生活的一个核心部分，而我们却常常不认为是这样的。今天的农民面临着一个巨大的挑战，即用更少的土地来养活日益增长的全球人口。预计到2050年，世界人口将增长到近100亿，这使得全球粮食需求增加50%。随着粮食需求的增长，土地、水和其他资源将面临更大的压力。农业中固有的可变性，如气候条件的变
原创
2021-01-04 23:48:18
378阅读
# MySQL双主在生产中的应用
## 引言
MySQL双主是一种常见的高可用性方案，可以保证在一台主服务器发生故障时，另一台主服务器能够接管工作，从而确保系统的连续性和可用性。本文将介绍MySQL双主的实现流程，以及每一步需要做的事情和相应的代码。
## 流程图
下面是MySQL双主在生产中的实现流程图：
```mermaid
gantt
title MySQL双主实现流程
