随着大数据、人工智能和高性能计算的迅猛发展，在大数据分析、基因测序、芯片设计、数据库和AI训练等“大计算”应用场景中，计算资源需求呈现爆发式增长态势，而传统的计算架构在资源利用率、扩展性、IO性能等方面存在诸多挑战。为了应对这些挑战，天翼云提出全新的云计算基础设施产品理念——聚合计算，旨在突破物理限制，资源池化分离，聚合异构算力。天翼云聚合计算是由天翼云自主研发的下一代云计算算力基础设施，面向数据库、芯片设计、大数据、AI训练等场景，提供超聚合主机、超大内存主机、内存即服务、池化计算加速四种产品和服务。通过高速总线互联技术，聚合计算不仅继承了传统云主机弹性、高可靠等优势，同时具备内存跨机共享、vCPU“无限”扩展和内存空间热变配等特性，为复杂业务场景提供源源不断的算力。依托领先的高速总线互联...阅读全文
Kernel-bypass，即绕过内核的意思，是一种计算机科学中的技术方法，用于减少操作系统内核在数据处理路径中的参与，从而降低系统调用的开销，提高数据传输和处理的效率。在高吞吐量、低延迟的应用场景中，如高性能网络通信、大数据处理、金融交易系统等，kernel-bypass技术尤为重要。传统的数据传输流程需要经过用户空间（User Space）到内核空间（Kernel Space）的上下文切换，这个过程会引入额外的延迟。Kernel-bypass技术允许应用程序直接访问硬件资源（如网卡、存储设备），跳过了内核参与的数据路径，减少了系统调用和内存拷贝的次数，进而提升应用的性能。一些常见的kernel-bypass技术包括：DPDK (Data Plane Development Kit): 为...阅读全文
本文分享自天翼云开发者社区《快照技术对比学习》，作者:z****n1.快照的分类根据 SNIA 的定义, 快照有全量快照 (full snapshot) 和增量快照 (incremental snapshot) 两种类型。2.全量快照克隆(Clone)：与备份操作类似，克隆技术是一种数据复制和恢复的方法，用于创建源数据的完全副本。将源数据的所有信息和状态以二进制形式进行备份，并在需要时将其恢复到相同或另一个系统中。克隆对象可以是存储卷、文件系统或者LUN，优势在于它提供了完全一致和独立的复制，不受源系统的影响。缺点就是在创建时要完整的复制一份数据，需要占用和源数据空间一样大的存储空间，资源成本高，消耗时间长。镜像分离(Split Mirror)：镜像分离也属于全量快照，先创建源卷的一个镜像卷...阅读全文
云计算、人工智能等信息技术的发展及应用，带来数据的爆发式增长，这不仅对存储系统的容量、性能、可靠性等提出了挑战，也推动了存储技术的不断创新。对象存储是一种将数据作为对象进行管理的网络存储架构，能够为用户提供可大规模扩展且经济高效的存储方案，其应用已逐渐深入到政务、金融、医疗、媒资、互联网等领域企业的核心业务。作为云服务国家队，天翼云以科技创新为驱动，以客户需求为中心，持续推进数据存储技术和产品创新，助力企业提高数据管理效率，全力保障企业安全上云、用云。天翼云对象存储（CT-ZOS，Zettabyte Object Storage）是一款海量、弹性、高可靠、高性价比的存储产品，也是专门针对云计算、大数据和非结构化数据的海量存储形态，通过S3协议和标准的服务接口，提供图片、音视频、文本等非结构...阅读全文
“新存储 更轻量”天翼云存储资源盘活系统HBlock2024年线上技术分享会来啦！在2023年HBlock分享会之后不少小伙伴积极参与了1PB免费尝鲜活动好评如潮的同时也对HBlock有了更多期待！那么2024年轻量存储技术有哪些突破？HBlock又有哪些新的技术创新或场景实践让我们拭目以待此次分享会将一站式解决您的疑问~同时，参与HBlock产品众测还有机会赢取丰厚大礼和荣誉证书...阅读全文
本文分享自天翼云开发者社区《天翼云CDR基本概念》，作者：f****n产品定义云容灾CT-CDR（Cloud Disaster Recovery）为云主机提供跨可用区的容灾保护能力，RPO可达秒级、RTO可达分钟级。支持容灾演练、一键切换等功能。当生产中心故障时，可在容灾中心快速恢复业务，保障客户数据安全和业务连续性。当前云容灾CT-CDR处于公测阶段。产品基本概念RPORecovery Point Objective（恢复点目标），指故障发生时数据可以恢复到的时间点，决定生产中心发生故障时的数据丢失量。例如，RPO = 30秒，表示在生产中心发生故障时，最近30秒的数据无法恢复。RTORecovery Time Objective（恢复时间目标），指故障发生后服务器从中断到恢复运行所需要的...阅读全文
近日，天翼云联合权威科技媒体InfoQ举办了以“新存储，更轻量”为主题的线上技术分享会。天翼云存储产品线总监武志民讲解了HBlock的创新设计和技术。高性能·高可用·高可靠自研创新解决存储技术难题天翼云自主研发的业内首款存储资源盘活系统HBlock能够与底层基础设施完全解耦，同服务器上现网业务并存，将x86、ARM、龙芯等异构通用服务器中的存储资源统一管理，通过标准的iSCSI协议提供分布式块存储服务。在性能方面，HBlock单卷IOPS可达15万次、读写延迟小于200微秒，这要归功于自研的分布式多控架构和智能调度算法，以及多模式写缓存与读缓存的设计。写缓存方面，HBlock具有三种模式，可以根据不同场景的读写需求动态调整。读缓存方面，HBlock采用按需更新、分段加锁、高效淘汰算法和智能预...阅读全文
近日，第二届“新绿杯”信息通信行业赋能碳达峰碳中和创新大赛公布获奖名单，天翼云申报的“中国电信存储资源盘活系统在广州云计算数据中心节能降碳的规模应用”在大赛中荣获三等奖，在绿色领域再获权威认可。HBlock盘活数百PB存储资源助力广州云机房绿色转型在低碳节能的全球背景下，“耗能大户”数据中心正面临着资源优化和能效提升的双重挑战，提高存储资源利用率成为节能降碳的关键技术手段。作为华南地区最大的单体数据中心，广州云计算数据中心引入存储资源盘活系统HBlock，有效提升了数据中心的运行效率和能源利用效益。天翼云HBlock可与现网业务共存，能够将不同CPU架构/内存/硬盘配置的服务器中空闲的存储资源，整合为统一的虚拟存储资源池，提供高性能、高可用、高可靠的块存储服务，同时避免因添加新服务器而增加的...阅读全文
近日，天翼云联合InfoQ举办了以“新存储，更轻量”为主题的线上技术分享会。天翼云存储产品线总监潘亚莲以“轻量级存储集群控制器HBlock的设计理念与场景实践”为主题，讲解了HBlock在产品理念、价值主张、应用场景等方面的内容。自研·创新·可控HBlock开启存储新纪元IDC预测，全球2024年将生成159.2ZB数据，2028年将增加一倍以上，达到384.6ZB，这给企业存储系统的容量、性能、运维、成本、灵活性带来挑战。此外，由于过度配置、数据孤岛、冗余备份以及中断性的传输和迁移等操作，企业普遍面临存储资源利用率低的问题。为了帮助用户应对以上挑战，天翼云自研了业界首款存储资源盘活系统——HBlock。HBlock是轻量级存储集群控制器，可实现全用户态软件定义存储，能将闲置存储资源转换成高...阅读全文
本文分享自天翼云开发者社区《算网资源调度关键技术》，作者：大**术一、概述在云网融合阶段，网络为云计算提供连接服务，云计算为网络云化提供支撑。随着云网一体化持续演进，云网融合步入算力网络新阶段。算力网络通过对业务、算力资源和网络资源的协同感知，将业务按需调度到合适的算力节点，实现算网资源的统一编排、统一运维、统一运营和统一优化。为确保算网资源的灵活高效调度，在算网基础设施、算网控制与管理、算网服务等方面，算力网络亟需解决一系列关键技术问题：在算网基础设施方面，算力网络需具备算力资源抽象与统一标识能力，屏蔽异构算力差异和异构网络差异，提供高质量的网络连接服务；在算网控制与管理方面，算力网络需感知算网资源状况，根据需求完成算网编排，灵活匹配算力需求与算网资源，实现算网高效运营与调度；在算网服务方...阅读全文
本文分享自天翼云开发者社区《私有云服务器虚拟化超分比及资源扩容管理》，作者：7****m服务器虚拟化技术已商用多年，并已成为云计算产业发展的基石。私有云用户更是非常关注服务器虚拟化的超分比，因为直接影响到用户可用的虚机资源量。超分比技术介绍：服务器虚拟化超分比，就是控制宿主机最大开出的vcpu资源数，当设置的超分比高时，可开出的最大vCPU资源就多。真正影响虚机性能的还是物理CPU的利用率，即物理CPU低并发没什么影响，高并发下超分比过高会增加CPU调度产生的性能损耗。举例，资源池物理资源总核数为100核，无论是3倍还是4倍的超分比，当已开出的虚机vCPU小于100核时，云主机独立占用CPU的时间片，性能和独享CPU性能基本一致。当开出的虚机vCPU是300核在运行时，无论是3倍还是4倍的超...阅读全文
Vulkan原理与实战 Vulkan是一个用于图形和计算设备的编程接口，它允许开发人员直接访问硬件资源，提供对设备的更多控制和更高的性能。Vulkan设备通常由一个处理器和一定数量的固定功能硬件模块组成，用于加速图形和计算操作。Vulkan的计算模型基于并行计算，并且是一个显式的API，意味着开发人员需要亲自管理几乎所有的资源和操作。这与传统的图形API（如OpenGL）形成对比，后者在老的API中自动管理内存和同步，但在应用程序正确运行时可能会消耗宝贵的CPU性能。 Vulkan应用场景： 游戏开发：Vulkan的高效性能和低开销特性使其成为游戏开发者的理想选择，尤其是在需要高帧率和复杂渲染效果的游戏中。 图形渲染：无论是实时渲染还是离线渲染，Vulkan都能提供强大的图形处理能力...阅读全文
摘要：本文整理自阿里云计算平台事业部，实时计算&托管生态 SRE 团队的许雷力（阿里云技术专家）和张韦杰（阿里云开发工程师），在 Flink Forward Asia 2022 生产实践专场的分享。本篇内容主要分为三个部分： 业务背景与挑战 成本优化 - 热点处理 整体规划和未来方向 点击查看原文视频 & 演讲PPT 一、业务背景与挑战 1.1 实时计算集群现状 关于热点机器处理一直是阿里云 Flink 集群运维的一大痛点，不管在日常还是大促都已经是比较严重的问题，同时这也是分布式系统的老大难问题。而在今年整个阿里云成本控制的背景下，随着集群水位的逐步抬升，热点问题愈发严重。日均有上千次的热点机器出现，并且在晚上业务高峰期，整个热点持续时间会超过 60min，对于业务以及对于平台影响是比较大...阅读全文
本文分享自天翼云开发者社区《一种面向混合云平台基于LSTM预测模型的资源池配额方法。》，作者：l****n基于用户的历史配额申请情况和实际资源使用情况组成数据集搭建LSTM时序预测模型。当前用户提出资源配额申请时，基于该用户的历史资源实际使用情况结合LSTM模型来预测该次配额申请的实际使用量来动态调整实际分配给用户的配额量从而减少资源滥用的可能性。针对用户是否所属于组织或者部门来限定用户可分得的最大资源配额数量，进一步实现资源配额公平性。步骤1 选取包含用户的资源实际使用数和对应申请额度数的数据集。将用户u在日期d申请的资源配额数表示为，本次配额申请最终用户实际使用的资源配额数表示为,计算 并以日期d作为索引，若同样的日期d用户u提交了多个资源配额申请则对所有资源的取平均值作为索引d的值，将...阅读全文
9月11日，2024 IDC中国年度盛典暨颁奖典礼在上海拉开帷幕。天翼云国际业务事业部专家彭成参加“绿色生态·出海创新论坛”，以《乘风破浪 国云出海——构建出海合作生态，助力全球客户上云》为题，分享天翼云在服务企业出海方面的优势及诸多实践。依托领先的技术产品和解决方案，天翼云正助力更多客户扬帆起航，共探全球化发展新路径。国云扬帆出海，力促全球数字经济繁荣近年来，得益于政策支持及日益完善的市场环境，越来越多企业积极布局海外，寻找增量市场。作为云服务国家队，天翼云积极响应“一带一路”倡议，通过提供优质的数字化产品和服务，推进“一带一路”沿线国家数字化转型，不仅为中国企业的国际化发展筑牢坚实数字底座，更为全球数字经济的繁荣壮大贡献力量。经过十余年的发展，天翼云已形成了全球“2+4+31+X+O...阅读全文
本文分享自天翼云开发者社区《浅谈网络文件系统原理》，作者：谢****云什么是网络文件系统？网络文件系统（Network File System, NFS）实现了一种软件协议，能将远端的文件系统映射到本地，使用者访问网络上的文件就像在使用自己的计算机一样。远端是专属存储系统，通常称为NAS存储。比较出名的网络文件系统的实现包括Sun公司的NFS，微软的CIFS（Common Internet File System）等，网络文件系统的访问示意图如下：图1 网络文件系统挂载示意图网络文件系统协议实现了将远端的目录树映射到本机，成为本机目录树种的一颗子树。一个实现合格的网络文件系统，实现了文件操作接口的POSIX（Portable Operating System Interface X）语义，...阅读全文
大发赔率最高邀请码「收获」-荣昌地区报道╇【清风寇：４４２０４５】✅【地址：ｚｈ８８。ｖｉｐ】✅厚德载物✅金牌团队✅中崋计划✅导师稳带✅万人推荐✅【zhfadacaihou】我不敢休息，因为我没有存款；我不敢说累，因为我没有成就；我不敢偷懒，因为我还要生活；我能放弃选择，但是我不能选择放弃。所以坚强，拼搏是我唯一的选择，不受天磨非好汉，不遭人妒是庸才。人生就像爬坡，要一步一步来，有挫败才有成长，能坚持别人不能坚持的，才能拥有别人不能拥有的，没有礁石，就没有美丽的浪花；没有挫折，就没有壮丽的人生。 来源：凤凰资讯-网易新闻-知乎日报-热点资讯-搜狐新闻-新浪新闻-央视网 统筹：大圣、哪吒、吉吉国王 责任编辑：清风扬 声明：该文观点仅代表作者本人，搜狐号-网易号-百家号-熊掌号-百度文库号-企鹅...阅读全文
