自：http://www.cnblogs.com/rollenholt/p/3874443.html Redis提供了RDB持久化和AOF持久化，本篇文章中将会对这两种机制进行一些对比 RDB机制的优势和略施 RDB持久化是指在指定的时间间隔内将内存中的数据集快照写入磁盘。 也是默认的持久化方式，这种方式是就是将内存中数据以快照的方式写入到二进制文件中,默认的文件名为dump.rdb（/var/lib/redis）。 可以通过配置(/etc/redis/redis.conf)设置自动做快照持久化的方式。我们可以配置redis在n秒内如果超过m个key被修改就自动做快照，下面是默认的快照保存配置 save 900 1 #900秒内如果超过1个key被修改，则发起快照保存 save 300 10...阅读全文
引言： 目前简单梳理了golang的知识点，进行查漏补缺，这里简要记录下golang中的make和new，由于个人能力有限，如有错误，欢迎指正。 正文： 1. make 分配了一个有初始值（非零）的T类型（我这里打印的为空，个人理解为空值）返回值 当slice cap无法满足需要，则在初始大小cap（即第三个参数，这里为6），成倍增长 2. new 分配了零值填充的T类型的内存空间，并返回其地址（指针） 当slice cap无法满足需要，则以16为基数，成倍增长 测试代码如下： “` package main import "fmt" //make 分配了一个有初始值（非零）的T类型（我这里打印的为空，个人理解为空值）返回值 当slice cap无法满足需要，则在初始大小cap（即第三个参数...阅读全文
目前，当Go需要和C/C++代码集成的时候，大家最先想到的肯定是CGO。毕竟是官方的解决方案，而且简单。 但是CGO是非常慢的。因为CGO其实一个桥接器，通过自动生成代码，CGO在保留了C/C++运行时的情况下，搭建了一个桥来沟通C/C++世界和Go的世界。这就意味着，兼容性很好，但是对C的函数的调用，必须先把当前的goroutine挂起，并切换执行栈到当前的线程M的主栈（大小2MB）。如果不做这个操作，那么只能在goroutine的栈上执行C函数调用，可是，goroutine的栈一般都很小，很容易就导致了栈溢出了。 调用C函数的时候，必须切换当前的栈为线程的主栈，这带来了两个比较严重的问题： 线程的栈在Go运行时是比较少的，受到P/M数量的限制，一般可以简单的理解成受到GOMAXPROCS...阅读全文
昇腾众智计划火热上线！140个算子/模型等你来挑战！>>> 最近线上一个服务又出现了频繁Full GC的情况，导致提供的业务经常超时。问题出现非常不稳定，经过两周的时候，终于又捕捉到了一次Full GC，于是联系运维做Heap Dump之后，经过一系列分析，终于解决问题。这次的问题稍微复杂一点，但是也比较有代表性，用到了VisualVM和MAT两个工具，继续记录如下。 现象 这次使用公司的CAT监控平台看到的内存表现如下： 可以看到，具体表现是： 在很长一段时间内(数个小时)，New GC比较频繁，Full GC较少(一小时个位数)。 过了某一时间点后，Full GC增加，New GC则减少。 将服务切换下线后，Memory Free逐渐回升，Full GC减少。 然后观察某一时刻的JMAP...阅读全文
1、 计算机的存储体系 内存是计算机很重要的一个资源，因为程序只有被加载到内存中才可以运行；此外，CPU所需要的指令与数据也都是来自内存的。可以说，内存是影响计算机性能的一个很重要的因素。 在介绍内存管理的细节前，先要了解一下分层存储器体系： 大部分的计算机都有一个存储器层次结构，即少量的非常快速、昂贵、易变的高速缓存(cache)；若干兆字节的中等速度、中等价格、易变的主存储器(RAM)；数百兆或数千兆的低速、廉价、不易变的磁盘。这些资源的合理使用与否直接关系着系统的效率。 CPU缓存（Cache Memory）：是位于CPU与内存之间的临时存储器，它的容量比内存小的多但是交换速度却比内存要快得多。缓存的出现主要是为了解决CPU运算速度与内存 读写速度不匹配的矛盾，因为CPU运算速度要比内...阅读全文
报错信息如下： Cause: com.mysql.jdbc.exceptions.jdbc4.CommunicationsException: Communications link failure The last packet successfully received from the server was 97,130 milliseconds ago. The last packet sent successfully to the server was 24 milliseconds ago. ; SQL []; Communications link failure .... Caused by: com.mysql.jdbc.exceptions.jdbc4.Communic...阅读全文
用了就会爱上，爱上就会离不开。本来给C盘留下了足够的空间，而且没有往其中添加其它文件、也没有安装什么应用，为什么它就不知不觉地满了呢？每次打开电脑打开大型软件就会变卡，甚至显示磁盘空间不足。有些软件虽然删除了但有一些安装软件还是会有卸载残留，极难进行清理，又不放心安装某些国产杀毒清理软件进行清理。那么到底是什么在占据着磁盘空间呢？今天要推荐的软件叫做Spacesniffer。Spacesniffer可以帮助我们一目了然知道你电脑有啥东西，藏得再深也逃不过它的眼睛。这是一款磁盘分析软件，不用安装，仅2MB不到。打开它，选择需要扫描的磁盘，单击“start”，之后它会快速地扫描磁盘，界面内跳动的小方块就像黑客在操作你的电脑。 最上方有扫描的进度，当显示“ready”时，扫描结束，可以根据界面上的...阅读全文
在使用mysql时，int、char和varcahr这几种类型是比较常用的。在大学时有学过数据库，对于int(N)、char(N)和varchar(N)中的N一直了解的不是较透彻，前段时间在网上查了很多资料，现在整理下。 1、int（N） int(N) ，N 表示最大显示宽度（字段设置zerofill属性时可查看区别），不指定N时，默认为11。N 的值跟 int(N) 所占多少存储空间或最大能存储多大长度数据并无任何关系。也就是说 int(3)、int(4)、int(8) 在磁盘上都是占用 4 btyes 的存储空间。 1）创建测试表tb1，字段id1显示宽度为3，id2的显示宽度为5 mysql> create table tb1 (id1 int(3),id2 int(5)); Quer...阅读全文
在MD5运算中 通常会把MD5（十六进制的byte[]）转成HexString, 会用到一个方法 private static String bytesToHex1(byte[] md5Array) { StringBuilder strBuilder = new StringBuilder(); for (int i = 0; i < md5Array.length; i++) { int temp = 0xff & md5Array[i];//TODO:此处为什么添加 0xff & ？ String hexString = Integer.toHexString(temp); if (hexString.length() == 1) {//如果是十六进制的0f，默认只显示f，此时要补上0...阅读全文
Java里，每个线程都有自己的ThreadLocalMap，里边存着自己私有的对象。Map的Entry里，key为ThreadLocal对象，value即为私有对象T。在spring MVC中，常用ThreadLocal保存当前登陆用户信息，这样线程在任意地方都可以取到用户信息了。 public class UserContext { private static final ThreadLocal
对于要达到同一查询结果而言，join和where的用法是语句格式不一样，查询的结果是一样的。 先来看看join的语句分类： left join :左连接，返回左表中所有的记录以及右表中连接字段相等的记录。 right join :右连接，返回右表中所有的记录以及左表中连接字段相等的记录。 inner join: 内连接，又叫等值连接，只返回两个表中连接字段相等的行。 full join:外连接，返回两个表中的行：left join + right join。 cross join:结果是笛卡尔积，就是第一个表的行数乘以第二个表的行数。 关键字: on 数据库在通过连接两张或多张表来返回记录时，都会生成一张中间的临时表，然后再将这张临时表返回给用户。 在使用left jion时，on和wher...阅读全文
author：skatetime：2009/12/09 linux删除文件后没有释放空间 今天发现一台服务器的home空间满了，于是要清空无用的文件，当我删除文件后，发现可用空间没有变化 os：centos4.7 现象： 发现当前磁盘空间使用情况： [root@ticketb ~]# df -hFilesystem Size Used Avail Use% Mounted on/dev/sda1 981M 203M 729M 22% /none 16G 0 16G 0% /dev/shm/dev/sda9 2.9G 37M 2.7G 2% /tmp/dev/sda7 4.9G 1.9G 2.7G 42% /usr/dev/sda8 2.9G 145M 2.6G 6% /var/dev/map...阅读全文
在 Linux 下，我们看到的是文件夹（目录）： 在早期的 UNIX 系统中，各个厂家各自定义了自己的 UNIX 系统文件目录，比较混乱。Linux 面世不久后，对文件目录进行了标准化，于1994年对根文件目录做了统一的规范，推出 FHS ( Filesystem Hierarchy Standard ) 的 Linux 文件系统层次结构标准。FHS 标准规定了 Linux 根目录各文件夹的名称及作用，统一了Linux界命名混乱的局面。 无论何种版本的 Linux 发行版，桌面、应用是 Linux 的外衣，文件组织、目录结构才是Linux的内心。 FHS（英文：Filesystem Hierarchy Standard 中文：文件系统层次结构标准），多数 Linux 版本采用这种文件组织形式...阅读全文
首页 > 基础教程 > 基础知识 > JDK&JRE&JVM Java JVM 参数设置大全 JVM参数设置说明 参数名称 含义 默认值 -Xms 初始堆大小 物理内存的1/64(<1GB) 默认(MinHeapFreeRatio参数可以调整)空余堆内存小于40%时，JVM就会增大堆直到-Xmx的最大限制. -Xmx 最大堆大小 物理内存的1/4(<1GB) 默认(MaxHeapFreeRatio参数可以调整)空余堆内存大于70%时，JVM会减少堆直到 -Xms的最小限制 -Xmn 年轻代大小(1.4or lator) 注意：此处的大小是（eden+ 2 survivor space).与jmap -heap中显示的New gen是不同的。 整个堆大小=年轻代大小 + 年老代大小 + 持久代...阅读全文
一、前言| ES作为现今最流行的搜索存储库，我们需要定期去清理ES集群的数据以保证集群处在一个最佳负载状态，那么如何去删除这些数据呢，我们今天来介绍一种比较常见的通过Delete By Query的方式去删除索引中的数据。二、Delete By Query API 介绍 怎么理解这个API呢？实际是批量删除数据的意思 功能：根据特定的查询条件对ES相关索引中某些特定的文档进行批量删除。POST index_name/_delete_by_query { "query": { //这些是自定义查询条件，根据查询条件去批量删除 "match": {//请求体跟Search API是一样的 "message": "some message" } } }复制Delete By Query 删除原理：...阅读全文
网上有一些maven-shade-plugin替代maven-assembly-plugin的文章，原因是代maven-assembly-plugin打出的jar包中要么是不能设置Main-Class，要么spring的META-INF/spring.*文件相互覆盖了。对于这两个问题，maven-assembly-plugin在当前的版本(3.1.0)中都可以解决了(方法见https://my.oschina.net/u/2377110/blog/1584205)。 实际上这两个插件所针对的用途其实是有差异的，而它们与maven默认的maven-jar-plugin都是打包插件，简单的区别如下： plugin function maven-jar-plugin maven 默认打包插件，用来...阅读全文
通过云服务器 CVM 连接云数据库 MongoDB 可以进行数据导入和导出，请注意使用最新版本的 MongoDB 客户端套件，具体操作可参见 连接实例。注意local 数据库主要存储副本集的配置信息、oplog 等元数据；admin 数据库则主要存储用户、角色等信息。为了防止数据错乱、鉴权失败等现象发生，云数据库 MongoDB 禁止将 local 和 admin 数据库导入实例。导出导入命令MongoDB 官方提供了两套数据导入导出工具：mongodump 和 mongorestore mongoexport 和 mongoimportmongodump 和 mongorestore进行整库导出导入时，通常使用 mongodump 和 mongorestore，这一对组合操作的数据是 BS...阅读全文
本文分享自天翼云开发者社区《边缘云特点、应用实践和发展趋势浅析》,作者:JinnyPeng随着物联网、人工智能和5G技术的快速发展，云计算正在迎来一场革命性的变革。在传统云计算架构中，数据和计算主要集中在大型数据中心中进行处理，这在某些场景下存在一定的局限性。为了满足实时性、低延迟和数据安全等需求，边缘云应运而生。本文将对边缘云的特点、应用实践和发展趋势进行浅析。一、边缘云的特点分布式计算：边缘云将计算资源从传统的集中式数据中心转移到网络边缘的设备和节点上。这种分布式计算的特点使得数据的处理和分析更加快速和高效。低延迟：边缘云将数据处理和分析的过程靠近数据源头，减少了数据传输的延迟。这对于实时应用场景，如自动驾驶、智能城市和工业自动化等至关重要。数据安全：边缘云可以在数据源头对数据进行处理和...阅读全文
 给大家整理了一些关于C++大厂面试2024最新真题，希望能够帮助到大家的面试： 1、synchronized 关键字和 volatile 关键字的区别 synchronized 关键字和 volatile 关键字是两个互补的存在，而不是对立的存在！ volatile 关键字是线程同步的轻量级实现，所以volatile 性能肯定比synchronized关键字要好。但是volatile 关键字只能用于变量而 synchronized 关键字可以修饰方法以及代码块 volatile 关键字能保证数据的可见性，但不能保证数据的原...阅读全文
本文分享自天翼云开发者社区《什么是算力网络》，作者:吴****江什么是算力网络？是一种根据业务需求，在云、网、边之间按需分配和灵活调度计算资源、存储资源以及网络资源的新型信息基础设施。“算力网络“是“以网络为中心”的多种融合资源供给网络计算模型，将“新计算”（云计算、边缘计算、泛在计算）的算力，通过“新联接”（无处不在的网络）整合起来，实现算力的灵活按需使用。各方对算力网络的定义和解释：算力网络：以网络为中心，融合算力、存储等信息的网络模型，即为算力网络。“算力网络“是“以网络为中心”的多种融合资源供给网络计算模型，将“新计算”（云计算、边缘计算、泛在计算）的算力，通过“新联接”（无处不在的网络）整合起来，实现算力的灵活按需使用。-网络 5.0 产业和技术创新联盟算力网络：是一种架构在IP网...阅读全文
本文分享自天翼云开发者社区《技术革命——云计算结合人工智能》,作者:z****n云计算在人工智能领域的应用非常广泛，它提供了强大的计算和存储资源，为人工智能算法和模型的训练、推理和部署提供了便利和效率。云计算和人工智能的结合将是一场技术革命，云计算+人工智能的未来是所有的业务都在云上提供。云计算在人工智能领域的几个重要应用：数据存储和处理：云计算提供了大规模的数据存储和处理能力，可以存储和管理海量的训练数据和模型数据。通过云计算平台，可以快速地将数据进行清洗、转换和预处理，以满足人工智能算法的需求。训练和优化模型：云计算平台可以为人工智能算法提供大规模的计算资源，加速模型的训练过程。云计算提供了分布式计算和并行计算的能力，可以同时处理多个训练任务，提高模型训练的效率和速度。通过云计算平台，可...阅读全文
9月6日，天翼云与科技媒体InfoQ联合举办的以“存储难题新解法，揭秘极/致易用的HBlock”为主题的线上技术分享会圆满落幕。天翼云国际业务事业部研发专家武志民与存储产品线总监魏玮以“天翼云存储资源盘活系统 HBlock，深挖独创技术亮点与实战演练”为主题，分享了HBlock在安装部署、数据可靠性和安全性保障、混沌测试与性能分析等内容。安装部署超易用，打造企业数据存储底座随着数字经济的蓬勃发展，数据作为核心生产要素，已成为数字经济发展的重要基石。与此同时，数据规模持续爆炸性增长，数据类型不断丰富，企业对数据处理与分析速度要求越来越高，带来了一系列存储的新挑战。尽管市场上的分布式存储产品和解决方案层出不穷，但如何提高企业存储资源利用率，同时满足安全可靠、高性能、方便易用、降本增效等需求并不容...阅读全文
【完结11章】技术大牛成长课,从0到1带你手写一个数据库系统 给大家分享一套数据库课程——技术大牛成长课,从0到1带你手写一个数据库系统，课程已完结，共11章，附源码。 数据库系统是为适应数据处理的需要而发展起来的一种较为理想的数据处理系统，也是一个为实际可运行的存储、维护和应用系统提供数据的软件系统，是存储介质 、处理对象和管理系统的集合体。 如果分片数据损坏，无法修复，比如某个磁盘坏了，这时候数据无法修复，为了恢复索引状态，可以允许分片的数据丢失，后续通过上层数据来重建索引，这时候我们可以增加 accept_data_loss参数来允许分片数据丢失 POST /_cluster/reroute { "commands": [ { "move": { "index": "test_inde...阅读全文
近日，2023年全国CIO大会在新疆伊宁举办。本次大会汇聚全国CIO精英，聚焦云计算、AI、低代码、云原生等技术，探讨数字化时代的领导力与创新力、数字化转型实战干货、新兴技术应用等热门议题。会上举行了全国优秀CIO以及CIO信赖品牌颁奖典礼，天翼云荣获“2022年度CIO最信赖品牌”称号。 破解存储难题，落实低碳发展战略天翼云国际业务事业部存储产品线总监潘亚莲出席会议并发表演讲，分享了天翼云在绿色低碳存储方案方面的探索与实践。当前，数字化、绿色化两大趋势相互融合、相互促进。打造绿色数据中心，以数字化促进绿色化，成为数字经济高质量发展的必然要求。作为数据中心基础设施三大件之一，存储也面临迈向“绿色化”的迫切需求。天翼云推出存储资源盘活系统HBlock，帮助企业用户提高数据中心资源利用率，优化资...阅读全文
linux 创建 swap分区 swap是什么？Swap：交换分区类似于Windows的虚拟内存，就是当内存不足的时候，把一部分硬盘空间虚拟成内存使用,从而解决内存容量不足的情况。当用户提交程序，然后产生进程，在机器上运行。机器会判断当前物理内存是否还有空闲允许进程调入内存运行，如果有那么则直接调入内存进行运行；如果没有，那么会根据优先级选择一个进程挂起，把该进程交换到swap中等待，然后把新的进程调入到内存中运行。根据这种换入和换出，实现了内存的循环利用，让用户感觉不到内存的限制。从这也可以看出swap扮演了一个非常. 复制链...阅读全文
本文分享自天翼云开发者社区《云电脑运行原理分析》，作者：大利一、虚拟化技术虚拟化技术是云电脑运行的核心技术之一。它可以将物理服务器虚拟化成多个虚拟机，每个虚拟机都拥有独立的操作系统和应用程序运行环境。虚拟机之间相互隔离，互不影响。虚拟化技术可以显著提高服务器的利用率，减少能源消耗，同时还可以提高系统的可靠性和安全性。在云电脑中，虚拟化技术主要应用于计算资源的管理和调度。当用户通过网络发送计算请求时，云电脑管理系统会根据负载情况，将请求分配给不同的虚拟机进行处理。每个虚拟机都拥有独立的计算资源，可以同时处理多个用户请求。这种分布式计算的方式可以显著提高系统的处理能力和响应速度。二、容器技术容器技术是另一种轻量级的虚拟化技术，它可以将应用程序及其依赖项打包成一个独立的容器，实现应用程序的快速部署...阅读全文
本文分享自天翼云开发者社区《云主机使用的硬盘类型及对应的存储类型详解》，作者：不知不觉随着云计算的普及，云主机已成为企业和个人用户的重要选择。云主机为用户提供了灵活、可伸缩的计算资源，并且具有高可用性、高可扩展性以及易于管理的特点。在云主机的使用过程中，硬盘类型和存储类型的选择是非常重要的环节。本文将详细介绍云主机所使用的硬盘类型以及对应的存储类型，帮助读者更好地了解和选择适合自己需求的云存储方案。一、云主机使用的硬盘类型SSD硬盘SSD（Solid State Drive）硬盘，即固态硬盘，是一种基于闪存芯片的存储设备。与传统的机械硬盘（HDD）相比，SSD硬盘具有更高的读写速度、更低的延迟、更高的耐用性和更高的性能。因此，SSD硬盘通常用于需要高I/O性能的应用场景，如数据库、Web服务...阅读全文
 Flutter组件采用现代响应式框架构建，这是从React中获得的灵感，中心思想是用组件(widget)构建你的UI。 组件描述了在给定其当前配置和状态时他们显示的样子。当组件状态改变，组件会重构它的描述(description)，Flutter 会对比之前的描述， 以确定底层渲染树从当前状态转换到下一个状态所需要的最小更改。 1、环境搭建 Flutter 的环境搭建十分省心，特别对应 Android 开发者而言，只是在 Android Stuido 上安装插件，并到 GitHub Clone Flutter 项目到本地之...阅读全文
kubelet节点压力驱逐 kubelet监控集群节点的 CPU、内存、磁盘空间和文件系统的inode 等资源，根据kubelet启动参数中的驱逐策略配置，当这些资源中的一个或者多个达到特定的消耗水平，kubelet 可以主动地驱逐节点上一个或者多个pod，以回收资源，降低节点资源压力。 基于kubernets v1.17.4 1.什么时候发生驱逐 kubelet结合以下数据项来做出驱逐决定： （1）驱逐信号； （2）驱逐策略； （3）驱逐监测间隔； 1.1 驱逐信号 节点上的memory、nodefs、pid等资源都有驱逐信号，kubelet通过将驱逐信号与驱逐策略进行比较来做出驱逐决定； 驱逐信号列举如下： （1）memory.available； （2）nodefs.available...阅读全文
上篇文章中我们对单列集合中常用的方法和遍历查询。通过本文章为我们解惑，好好的字符串用起来不就行了，为什么要用集合这些工具类？本篇文章将简要介绍数据结构，让读者了解它们在计算机中以何种结构方式存在。那么，什么是数据结构呢？下面我们来详细解释。 ## 数据结构 ### 1.1 数据结构有什么用？ 数据结构是计算机存储、组织数据的方式。 数据结构是指相互之间存在一种或多种特定关系的数据元素的集合。 通常情况下，精心选择的数据结构可以带来更高的运行或者存储效率。  数据结构往往同高效的检索算法和索引技术有关。 这句话是啥意思...阅读全文
本文分享自天翼云开发者社区《弹性云主机支持多种规格》，作者：每日知识小分享随着云计算技术的快速发展，弹性云主机已经成为了一种广泛使用的云计算服务。弹性云主机是一种可动态调整的计算资源，可以根据用户的需求进行灵活配置。其中，支持多种规格是弹性云主机的一项重要特性，它可以让用户根据实际需求选择合适的规格，以满足不同的应用场景。一、弹性云主机简介弹性云主机是一种基于云计算技术的虚拟化平台，它可以为用户提供独立的、可动态调整的计算资源。弹性云主机可以根据用户的需求进行灵活配置，包括CPU、内存、存储等方面。这种服务可以帮助用户降低IT成本，提高工作效率，同时还可以提供高可用性和灵活性。二、多种规格支持弹性云主机支持多种规格，包括不同的CPU、内存和存储配置。用户可以根据自己的需求选择合适的规格，以满...阅读全文
如何优雅高效的在海量数据存储与查找 对于这个问题我们首先可能会想到直接去存储这40亿个数据，当然这确实是一种方法。但是我们是否考虑过这样做的后果呢？如果你的解决方案就是上面的那种方法的话，那你可能真的没有考虑过后果。所以你有必要继续往下读。 我们先不管后果是什么，现在我来带大家看一组数据，假设这40亿个数据是4个字节的unsigned int 型的数据。那嘛现在 我们要存储这40亿个数据就需要的空间为：(40 * 10^8) * 4byte = 14.9GB (注意这里所换算机制：1GB=2^10Mb=2^20kb=2^30byte,下面涉及到的计算也是采用这种方式)所以大家看见了后果就是占用了这么大的内存空间，一般计算机上的内存根本就放不下嘛，所以这还怎么干活。。。 该怎么办呢？ 那么我们...阅读全文
本文分享自天翼云开发者社区《云监控的核心：确保稳定性的关键监控指标》，作者：每日知识小分享随着云计算技术的广泛应用，云监控成为了确保云服务稳定、高效运行的重要手段。在云监控中，选择合适的监控指标至关重要，它们不仅能够反映云服务的运行状态，还能帮助运维人员及时发现并解决问题。本文将详细探讨云监控所需的关键监控指标，并分析这些指标在云监控中的重要性。云监控是指对云服务进行实时监控，收集和分析各种运行数据，以便及时发现和解决潜在问题。云监控的目的是确保云服务的稳定性、可用性和性能。为了实现这一目标，需要选择一系列关键监控指标来全面反映云服务的运行状态。一、云监控的核心监控指标云监控需要关注以下核心监控指标：CPU使用率：CPU使用率反映了云服务器的计算资源利用情况。高CPU使用率可能导致服务响应延...阅读全文
本文分享自天翼云开发者社区《云电脑：IO虚拟化实现的技术分析》，作者：大利云电脑是一种基于云计算技术的虚拟化电脑，它通过网络将物理硬件资源虚拟化成多个虚拟机，每个虚拟机都拥有独立的操作系统和应用程序。IO虚拟化技术是实现云电脑的关键技术之一，它可以实现网络和存储等资源的虚拟化。本文将从专业论述的角度来探讨云电脑中IO虚拟化技术的实现原理、分类和应用场景。一、IO虚拟化技术的实现原理IO虚拟化技术是一种将硬件资源虚拟化的技术，它可以在虚拟机中模拟真实的网络和存储设备，使得虚拟机可以像真实的计算机一样进行网络访问和数据存储。IO虚拟化技术的实现原理主要包括以下几个方面：1.硬件资源的虚拟化：IO虚拟化技术通过在物理硬件资源上添加虚拟化层，将物理硬件资源划分为多个虚拟资源，每个虚拟资源都有独立的内...阅读全文
本文分享自天翼云开发者社区《列式云数据库与关系型云数据库：区别、优缺点与选择》，作者：3****m一、列式云数据库与关系型云数据库的区别数据存储方式列式云数据库以列为单位组织数据，将同一列的数据存储在一起，每个列都有一个相关的列式存储文件。这种数据存储方式适合于大量数据分析和高性能计算的场景，因为列式云数据库能够更好地压缩数据并提高查询效率。而关系型云数据库则采用传统的关系型数据模型，以行为单位组织数据，每个表由多个行组成，每个行由多个列组成，通过主键和外键进行关联。关系型云数据库提供了完整的SQL支持，适用于需要复杂查询和数据分析的应用场景。查询性能列式云数据库通常在大数据量和高并发查询场景下表现出更高的性能。由于列式存储将数据按列划分，因此在执行查询时可以仅扫描所需的列，避免了全表扫描的...阅读全文
本文分享自天翼云开发者社区《云电脑：DPU简介及分析》，作者：大利随着云计算技术的快速发展，云电脑作为一种基于云计算技术的虚拟化电脑，正在逐渐受到广泛关注。然而，云电脑在实现过程中面临着许多挑战，如计算资源的有限性、数据传输的瓶颈等。为了解决这些问题，一种新型的设备——数据处理单元（Data Processing Unit，DPU）应运而生。本文将从专业的角度对DPU进行详细介绍和分析，包括其定义、功能、优势以及应用前景等方面。一、DPU的定义与功能DPU的定义：DPU是一种专门用于数据处理和计算的硬件设备，它可以卸载和加速主机CPU的计算任务，提高整个系统的计算效率。简单来说，DPU相当于一种协处理器，可以帮助CPU分担一部分计算任务，从而提高整个系统的性能。DPU的功能：DPU的主要功能...阅读全文
近日，由天翼云科技有限公司云网产品事业部混合云团队完成的论文《Multivariate Time Series Collaborative Compression for Monitoring Systems in Securing Cloud-based Digital Twin》在云计算领域国际知名学术期刊Journal of Cloud Computing：Advances,Systems and Applications（JoCCASA）发表。JoCCASA是全球最大科学出版社之一的德国Springer（施普林格）旗下刊物，SCI JCR分区为2区，近5年影响因子4.4。此次论文在JoCCASA上的发表，代表天翼云科技创新能力再次获得业界权威认可。时序数据压缩是解决海量监控数据长周...阅读全文
Mysql设置binlog过期时间并自动删除 问题： Mysql数据库由于业务原因，数据量增长迅速，binlog日志会增加较多，占用大部分磁盘空间。 解决方案： 出于节约空间考虑，可进行删除多余binary日志，并设置定期删除操作。 1、查看binlog过期时间 mysql> show variables like 'expire_logs_days'; 或者 mysql> select @@global.expire_logs_days; +------------------+-------+ | Variable_name | Value | +------------------+-------+ | expire_logs_days | 0 | +-----------------...阅读全文
本文分享自天翼云开发者社区《CDN与云计算技术的结合：专业视角下的深度融合》，作者：大利随着信息技术的不断发展，内容分发网络（CDN）与云计算技术作为两种重要的互联网基础设施，其结合已成为行业发展的重要趋势。CDN负责高效地分发和传输互联网内容，而云计算则提供强大的计算、存储和应用服务。当这两者结合时，能够为用户提供更加优质、高效的服务体验。本文将从专业的角度深入解析CDN与云计算技术的结合，探讨其优势、应用场景以及未来发展趋势。一、CDN与云计算技术结合的优势资源共享与池化：CDN与云计算的结合使得大量的计算资源和存储资源得以共享和池化，提高了资源的利用率。CDN节点可以作为云计算的一部分，提供计算和存储服务，而云计算平台也可以为CDN提供强大的计算能力和存储支持。弹性扩展与灵活性：云计算...阅读全文
本文分享自天翼云开发者社区《如何在弹性云主机上部署高效的数据库系统》，作者：二进制诗人在当今云计算的时代，弹性云主机（Elastic Cloud Compute, EC2）为我们提供了前所未有的灵活性和扩展性，使得在云端部署高效的数据库系统成为可能。本文将从选择合适的云服务配置、优化数据库配置、数据备份与恢复策略以及保障数据库安全四个方面分享如何在弹性云主机上部署高效的数据库系统。1.选择合适的云服务配置选择合适的实例类型弹性云主机提供了多种实例类型，针对不同的用途（如计算优化、内存优化等）。对于数据库系统，通常需要考虑内存优化或存储优化的实例类型，例如AWS的R5实例（内存优化）或I3实例（存储优化）。配置高性能存储数据库性能很大程度上取决于存储性能。推荐使用SSD（固态硬盘）作为数据库的...阅读全文
本文分享自天翼云开发者社区《存储结构的种类与比较》，作者：3****m一、存储结构的种类顺序存储结构顺序存储结构是一种线性数据存储方式，数据按照顺序方式存储在一片连续的存储区域中。顺序存储结构的特点是数据元素之间的逻辑关系与物理位置的存储顺序一致。这种存储结构适用于数据量较小、数据元素之间关系简单的情况。链式存储结构链式存储结构是一种非线性数据存储方式，通过指针或链接将各个数据元素链接起来。链式存储结构的特点是数据元素的物理位置可以不相邻，但通过指针或链接保持逻辑上的关联。这种存储结构适用于数据量大、数据元素之间关系复杂的情况。散列存储结构散列存储结构是一种基于哈希函数的数据存储方式，通过将数据元素的键值映射到固定大小的数组中，实现数据的快速检索。散列存储结构的特点是数据的检索速度快，但需要...阅读全文
近日，弗若斯特沙利文（Frost & Sullivan，简称“沙利文”）联合头豹研究院发布《2023年中国边缘云市场报告》，天翼云在2023H1中国边缘云IaaS层细分市场位列第一，领跑中国边缘云市场。近年来，随着5G、物联网等技术的飞速发展，智能终端设备数量迅速增加，产生的数据量呈指数级增长，这对数据处理的时效性、可靠性提出更高要求。边缘云通过将网络、计算、存储资源部署到离用户设备更近的位置，更好地满足用户在敏捷连接、实时业务等不同方面的需求。作为云服务国家队，天翼云立足客户需求，持续深耕边缘计算领域，不断加速算力基础设施建设，并构建完善的边缘云产品矩阵，以低时延、高可靠、高安全、可调度的边缘云服务，助力企业实现敏捷业务响应、释放业务价值，推动算力普惠。在边缘算力布局方面，天翼云充分发挥...阅读全文
近日，知名开源大规模并行处理 (MPP) 数据库Greenplum的源代码在其官方GitHub页面突然消失，引发了用户和开发者的广泛关注， PostgreSQL生态系统或将产生新变数。开源软件在面对商业化和盈利需求时的举措，将对行业产生巨大影响：开源信任的挑战：频繁的开源协议变更可能会导致企业和开发者对开源项目的信任度下降。法律和合规考虑：新协议条款可能引发企业对法律和合规风险的重新评估，影响其技术选型和投资决策。作为云服务国家队，天翼云不断加快关键核心技术自主攻关，针对市场需求自研TeleDB数据库，能够助力客户平滑迁移Greenplum数据库，实现应用无缝切换，以更可靠的产品和更优质的服务，提供企业数据管理更优解。TeleDB分析型实例，企业数据库领先之选天翼云TeleDB分析型实例是一...阅读全文
近日，中国电信天翼云的自研产品HBlock凭借“存储资源盘活技术”成功入选《国家工业和信息化领域节能降碳技术装备推荐目录（2024年版）》（以下简称《目录》），这一成绩是对中国电信天翼云以科技创新赋能千行百业绿色低碳发展的认可。存储资源盘活技术作为该目录唯一的存储软件技术，能够快速整合现网资源，大幅提升基础设施资源利用率，同时具备轻量、绿色、灵活、共生等优势，助力企业实现节能降碳和降本增效，为数据中心绿色转型提供技术保障。复制链接前往工信部官网即可查看：https://www.miit.gov.cn/jgsj/jns/gzdt/art/2024/art_60736b016395460890aeda756751526d.html《目录》的发布，旨在加快节能技术装备推广应用，提高工业和信息化领...阅读全文
本文分享自天翼云开发者社区《灾难恢复中的异步复制和同步复制》，作者:h****n1.异步复制异步复制用于在远程位置创建数据备份。它涉及从主存储系统复制数据到辅助存储系统，并在两个系统之间设置延迟。这种延迟可以从几秒钟到几分钟不等，具体取决于实现和网络条件。数据传输方面，异步复制涉及从主存储系统定期传输数据到辅助存储系统。数据以块或分块的形式传输，而不是连续传输，这减少了网络和存储资源的负载。这种以块和分块的传输也引入了主存储系统和辅助存储系统之间的数据同步的时间延迟，这种延迟称为复制延迟。在发生故障时，故障转移是从主系统切换到辅助系统的过程。由于异步复制的延迟，故障转移可能涉及一些数据丢失，并且可能需要额外的步骤以确保两个系统之间的一致性。以下是以ceph的异步复制 RBD mirrorin...阅读全文
本文分享自天翼云开发者社区《OpenStack基本介绍》，作者:m****n基本介绍OpenStack是一个开源的云计算管理平台项目，由几个主要的组件组合起来完成具体工作。OpenStack支持几乎所有类型的云环境，项目目标是提供实施简单，可大规模扩展、丰富、标准统一的云计算管理平台。OpenStack通过各种互补的服务提供了基础设施即服务（IaaS）的解决方案，每个服务提供API以进行集成。OpenStack云计算平台，帮助服务商业和企业内部实现类似于Amazon EC2 和 S3 的云基础架构服务（Infrastructure as a Service，IaaS）。OpenStack包含两个主要模块：Nova和Swift，前者是NASA开发的虚拟服务器部署和业务计算模块；后者是Racks...阅读全文
近日，中国电子学会联合中国电子技术标准化研究院等单位，在安徽省合肥市举办“节能服务进企业”暨绿色数据中心对接推广活动。会议为天翼云存储资源盘活系统HBlock入选《国家工业和信息化领域节能降碳技术装备推荐目录（2024年版）》颁发荣誉证书；天翼云存储产品专家肖夏敏发表演讲，向业界展示了HBlock在绿色节能方面的落地实践。创新自研，让存储绿意满满！作为云服务国家队，天翼云在大规模数字基础设施建设实践中，深刻认识到提升资源利用率的重要性。针对传统分布式存储交付难、独占硬件等痛点，天翼云自主研发了可盘活闲置资源、节约存储空间、平滑替换节能硬件的首/款存储资源盘活系统HBlock，能够快速整合现网闲置存储资源，大幅提升基础设施资源利用率，为数据中心绿色转型提供技术保障，助力企业节能降碳、降本增效...阅读全文
本文分享自天翼云开发者社区《中小企业上云推广产品组合建议》，作者:z****n中小企业（SMEs）需要处理和存储越来越多的数据，因此他们需要可扩展和可靠的云计算平台来帮助他们管理这些数据以及提高其业务操作效率。以下是在中小企业中推广云计算产品的建议方案：一、云主机、存储、网络产品的组合中小企业通常都有一些简单而常见的IT需求，例如建立一个网站或管理他们的财务数据等。因此，我们可以将云主机、存储和网络结合起来，以提供一个完整的、可靠的云基础架构，以满足他们应用程序运行、数据存储和网络流量等需求。其中，可选用如下产品：1.云主机：提供用于安装和运行应用程序的虚拟服务器，包括Linux和Windows两种操作系统，允许用户自由扩展CPU、内存和存储容量等。2.对象存储：提供可扩展的存储容量，支持多...阅读全文
随着大数据、人工智能和高性能计算的迅猛发展，在大数据分析、基因测序、芯片设计、数据库和AI训练等“大计算”应用场景中，计算资源需求呈现爆发式增长态势，而传统的计算架构在资源利用率、扩展性、IO性能等方面存在诸多挑战。为了应对这些挑战，天翼云提出全新的云计算基础设施产品理念——聚合计算，旨在突破物理限制，资源池化分离，聚合异构算力。天翼云聚合计算是由天翼云自主研发的下一代云计算算力基础设施，面向数据库、芯片设计、大数据、AI训练等场景，提供超聚合主机、超大内存主机、内存即服务、池化计算加速四种产品和服务。通过高速总线互联技术，聚合计算不仅继承了传统云主机弹性、高可靠等优势，同时具备内存跨机共享、vCPU“无限”扩展和内存空间热变配等特性，为复杂业务场景提供源源不断的算力。依托领先的高速总线互联...阅读全文
Kernel-bypass，即绕过内核的意思，是一种计算机科学中的技术方法，用于减少操作系统内核在数据处理路径中的参与，从而降低系统调用的开销，提高数据传输和处理的效率。在高吞吐量、低延迟的应用场景中，如高性能网络通信、大数据处理、金融交易系统等，kernel-bypass技术尤为重要。传统的数据传输流程需要经过用户空间（User Space）到内核空间（Kernel Space）的上下文切换，这个过程会引入额外的延迟。Kernel-bypass技术允许应用程序直接访问硬件资源（如网卡、存储设备），跳过了内核参与的数据路径，减少了系统调用和内存拷贝的次数，进而提升应用的性能。一些常见的kernel-bypass技术包括：DPDK (Data Plane Development Kit): 为...阅读全文
