Iptables 命令使用举例 1、链的基本操作 (1) 清除所有规则 1)          清除预设表filter中所有规则链中的规则 # iptables –F 2) 清除预设表filter中使用者自定链中的规则  &n
转载 2024-05-06 11:54:44
37阅读
时间序列被视为四元组序列。四重定义为(设备、测量、时间、值)。 测量:时间序列正在采取的物理或形式测量,例如,城市的温度、某些商品的销售数量或不同时间的火车速度。由于传统的传感器(如温度计)也进行单次测量并产生时间序列,因此我们将在下面互换使用测量和传感器。 设备:设备是指进行多次测量(产生多个时间序列)的实体,例如,正在运行的火车监控其速度、油表、运行里程、当前乘客每个被传送到一个时间序列。
原创 2023-09-11 10:21:48
411阅读
TsFile-Hive-Connector 实现了 Hive 对 Tsfile 类型的外部数据源的支持。这使用户能够按Hive操作Tsfile,还可以将单个 TsFile 从本地文件系统或 hdfs 加载到 hive 中, 并且把特定目录中的所有文件(从本地文件系统或 hdfs)加载到 hive 中。
原创 2023-09-06 11:50:01
170阅读
加载外部 tsfile 工具允许用户从正在运行的 Apache IoTDB 实例加载 tsfiles、删除 tsfile 或将 tsfile 移动到目标目录。默认情况下,将创建架构。当tsfile对应的存储组不存在时,用户可以通过第四个参数设置存储组的级别。默认情况下,它将使用 中设置的存储组级别。如果该文件对应的文件存在,则会加载到 Apache IoTDB 的数据目录和引擎中。
原创 2023-09-04 12:51:04
172阅读
TsFile-Hadoop-Connector 实现了 Hadoop 对 Tsfile 类型的外部数据源的支持。这使用户能够通过Hadoop读取,写入和查询Tsfile
原创 2023-09-04 20:18:04
159阅读
TsFile-Spark-Connector 可以在 SparkSQL By SparkSQL 中将一个或多个 TsFiles 显示为表。它还允许用户指定单个目录或使用通配符来匹配多个目录。如果有多个 TsFiles,则所有 TsFiles 中测量值的并集将保留在表中,并且默认情况下,具有相同名称的度量将具有相同的数据类型。
原创 2023-09-06 08:55:17
160阅读
描述官网集群配置示例:官方文档准备2台服务器,并且相互可以ping通和相关端口开放:192.168.1.1192.168.1.2相关介绍请查看官网及相关文档。配置1、iotdb 0.13版本下载(如果已安装请跳过),进入opt目录并下载。cd /optwget https://dlcdn.apache.org/iotdb/0.13.4/apache-iotdb-0.13.4-all-bin.zi
转载 2024-10-26 18:13:39
66阅读
在大数据生态中有很多文件格式,像 Parquet,ORC,Avro 等等,都是针对嵌套数据设计的文件格式。这些文件格式普遍具有预先定义的schema,数据以行式写入,按属性组织,列式存储...
原创 2021-09-09 15:03:57
741阅读
简介        RCU(Read-Copy Update)是数据同步的一种方式,在当前的Linux内核中发挥着重要的作用。RCU主要针对的数据对象是链表,目的是提高遍历读取数据的效率,为了达到目的使用RCU机制读取数据的时候不对链表进行耗时的加锁操作。这样在同一时间可以有多个线程同时读取该链表,并且允许一个线程对链表进行修改
新建一个文件夹把转换为pdbqt格式的所有受体和配体都放到这个文件夹内。 安装后的vina.exe、vina_split.exe和vina_license.rtf也放进同一个文件夹中。新建第一个txt文本将此文本命名为conf.txt,其他任何名字均可。填入对接相关信息。主要是对接口袋的参数。笔者使用的是pymol中一个较get-box的插件得到的对接口袋参数。如下所示receptor = 5vb
目录1.准备需要的对接文件靶蛋白的pdbqt文件小分子库(.pdbqt)格式对接盒子及信息文件config.txt2.需要用到的工具linux系统(服务器,虚拟机或windows上的WLS均可)autodocktoolsopenbabelautodock vina3.对接环境配置4.对接过程1.准备需要的对接文件这部分参照我前面的博客,详细展开,会很冗长:对接文件准备 注:蛋白质的处理方法与博客中
作者:杨家鑫 背景 提高TiDB可用性,需要把多点已有上百T TiDB集群拆分出2套 挑战 1、现有需要拆分的12套TiDB集群的版本多(4.0.9、5.1.1、5.1.2都有),每个版本拆分方法存在不一样 2、其中5套TiDB,数据量均超过10T、最大的TiDB集群目前数据量62T、单TiDB集群备份集大,消耗大量磁盘空间和带宽资源 空间最大3套集群
熟悉 TiSpark 的人都知道,TiSpark 是 Spark 的一个插件,它其实就是给予了 Spark 能够去访问 TiDB 底层分布式存储引擎 TiKV 或者 TiFlash 的能力。之前我们一直在解决读的问题,写问题并没有付出太多的时间去解决。今天就给大家揭秘,我们是怎样使用 TiSpark 去实现海量数据批处理,然后写入到 TiDB 里面去的。传统批处理 vs TiSpark 的批处理在
转载 2024-05-12 19:04:37
101阅读
在低版本的 IoTDB 当中,Compaction 时出现上述异常,会将对应的 DataNode 设置为 ReadOnly 的状态,此时该节点会无法进行写入请求。还有两个 DataNode 节点是好的,连接好的 DataNode 节点写入是没有问题的,但是剩下的节点就不行了。更新至时序数据库 IoTDB 1.3.3 及以上版本。
今天,阿里云IoT物联网平台在华北2(北京)节点正式上线!对于华北地区的设备接入延时可以做到<10ms,比跨地域接入延时减少了3倍以上,同时支持通过规则引擎接入其他阿里云产品。按需开通实例    我们登录IoT物联网控制台,在左上角华北2(北京),即可在华北2创建IoT物联网平台实例,如下图: 在实例规格页面的地域和可用区,选择华北2(北京),其他规格可以
本文通过阐述一个高并发批量写入数据到 TiDB 的典型场景中,TiDB 中常见的问题,给出一个业务的最佳实践,避免业务在开发的时候陷入 TiDB 使用的 “反模式”。面向的对象本文主要面向对 TiDB 有一定了解的读者,读者在阅读本文之前,推荐先阅读讲解 TiDB 原理的三篇文章( 说存储 , 说计算 , 谈调度 ),以及 Ti
转载 2024-07-28 13:56:10
216阅读
最近今天写了IoTDB的三篇相关文章,完成了安装部署和客户端连接:Windows Server上部署IoTDB 集群DBeaver 连接IoTDBDriver将IoTDB注册为Windows服务TsFileIoTDB 的底层数据文件,一种专门为时间序列数据设计的列式文件格式。IoTDB TsFile数据读写主要是下面两个结构:IoTDB 提供了一个TSRecord工具,TSRecord记录了
转载 2024-06-23 04:27:19
96阅读
    Linux、Windows等操作系统的系统API时间函数一般涉及哪些操作,在高性能要求的程序中频繁调用,是否会影响效率?      这里并非在针对性的确定性能瓶颈,只是曾经看到有评价时间函数的调用是一个代价较高的操作,所以想知道系统时间函数在Linux或Windows下是怎样实现的,这中间涉及哪些过程,进而了解为何有时间函数的调用是“代价较
时序数据库 Apache-IoTDB 源码解析之元数据索引块(六)原有索引中的不足新版本中索引的设计 上一章聊到 TsFile 索引块的详细介绍,以及一个查询所经过的步骤。详情请见:时序数据库 Apache-IoTDB 源码解析之文件索引块(五)打一波广告,欢迎大家访问 IoTDB 仓库,求一波 Star 。欢迎关注头条号:列炮缓开局,这一章主要想聊聊:原有索引中的不足新版本中索引的设计原有索引
转载 2024-05-11 13:50:51
55阅读
背景物联网行业,需要存储不同设备的时序数据,数据量比较大,之前使用的是Hbase但是,鉴于Hbase对聚合操作支持的不是很友好,所以,打算替换成国产的IOTDB数据库简介IoTDB 是针对时间序列数据收集、存储与分析一体化的数据管理引擎。它具有体量轻、性能高、易使用的特点,完美对接 Hadoop 与 Spark 生态,适用于工业物联网应用中海量时间序列数据高速写入和复杂分析查询的需求。 
转载 2024-04-03 15:56:49
95阅读
  • 1
  • 2
  • 3
  • 4
  • 5