发布于 2023-10-25
海量数据的爆发式增长,给云和互联网数据中心带来诸多挑战,面向多云时代,迅速兴起的Diskless架构能够助力数据中心实现绿色节能、高性能、高可靠。云和互联网传统IT架构面临挑战云和互联网行业构建了我国最大的IT基础设施平台,存储和处理的数据量占比最大。随着数据中心建设规... (more)
Pod漂移是Kubernetes最重要的特性之一,是Kubernetes实现灵活调度和高可用的核心功能。今天,我们就从Pod漂移出发,浅析如何选择容器下的存储。我们首先简单解释一下什么是Pod漂移。在Kubernetes中,所有的微服务都是由一个一个Pod构建而成,Pod中包含一个或多个容器,它是Kubernete... (more)
发布于 2023-10-19
近年来,在自主创新与多云转型的驱动下,金融行业纷纷启动对传统数据库的改造。在目标数据库的选择上,分布式数据库呼声很高,然而实际落地情况并不理想。据《金融业数据库供应链安全发展报告》统计,分布式数据库在银行业使用占比仅有17.5%,在证券、保险业甚至不到4%,在金融核心场... (more)
随着ChatGPT等人工智能(AI)大模型的推出,让人们认识到AI技术的巨大潜力,并促使更多AI技术用于大数据分析及高性能计算等场景。例如,在大数据分析场景,使用AI模型将用户基于自然语言的输入直接转换为准确的SQL语句并替代传统的Spark SQL输入,将有效提升大数据分析效率。AI与大数... (more)
容器技术崛起应用的容器化部署方兴未艾,回顾容器技术二十多年的发展历程,跌宕起伏、精彩纷呈。容器本质是以进程管理为基础,实现应用程序运行环境隔离。虽然也出现了服务器虚拟化的技术路线,并衍生出基础架构即服务(IaaS)和平台即服务(PaaS)等云化模式,但容器技术依旧在众多竞争中... (more)
发布于 2023-09-27
2023年9月21日,由清华大学存储团队编著的《数据存储架构与技术》新书正式发布。新书力求全面呈现数据存储软硬件的基础内容与最新进展,助力新一代存储专业人才的培养。这本书凝结了舒继武教授20余年在清华大学的授课教学实践、带领存储团队的不懈研发探索以及与华为公司的... (more)
发布于 2023-08-21
1,NAS迁移不停机,是整个存储产业的追求,可是到目前为止,也就Netapp在自家同构存储换代的时候实现了这个能力,特性叫Volume Move,就是按照租户粒度迁移数据到不同的阵列,然后IP跟着租户最后漂移一把,但是一旦更换为第三方异构阵列,就没戏了。。。2,客观讲,金融行业都强调不停机,但是... (more)
发布于 2023-07-18
在典型的VMware虚拟化、FC交换机、企业存储的组网中1、性能问题是否是比较场景的问题2、性能问题的定界手段有哪些?
发布于 2023-05-16
先从单个容器的角度看日志的持久化存储:以Containerd容器运行时为例,容器日志会保存至/var/log/pods/$CONTAINER_NAME目录下,该目录默认保存在每个节点的本地盘上。但是本地存储有很多问题:日志量大会占用大量本地盘空间、日志分散管理难度大、POD漂移后日志找回难等;因此常见... (more)
发布于 2023-05-15
Kafka对存储性能的敏感程度本质上取决于业务诉求,Operator只是Kafka容器化之后一种典型的部署方式。Kafka作为高性能的消息队列,常用于实时或准实时的消息处理,建议配置高性能闪存存储。Kafka存储过程中,每个 Topic被分成多个 Partition,Partition 从物理上可以理解成一个文件... (more)
华为全面启动数据基础设施战略,围绕数据“采-存-算-管-用”全生命周期,将数据存储产品及解决方案落地生产交易、数据湖、边缘数存等核心业务场景,提供全闪存存储、海量存储、智能边缘存储及解决方案。华为数据存储解决方案中心为twt社区行业会员持续提供领先的存储产品技术服务与支持,帮助客户全面数字化转型。