-
烧钱又费力!Kafka给大数据运维留下了多少坑?
滴滴大数据 DKafka 集群,基于社区 2.12-0.10.2.0 版本。在运维过程中,遇到了不少痛点,如磁盘 IO 不均、存储容量不均、CPU 利用率不均等负载不均问题,尤其是在高峰期出现瓶颈或故障发生后,想要快速扩容止损成为了一个棘手的问题。
资讯 2024-06-13
-
1000+台Kafka集群扩张的自动化治理实战
我们拥有1000+台Kafka机器,组成了20多个集群,针对不同业务场景配置了不同规格的机器,磁盘类型包括HDD,SSD和NVME。每日PB级输入,输出数十PB,肩负着公司数据传输的重任。随着集群规模的扩张,我们也遇到了越来越多的挑战。
资讯 2023-12-21
-
柏睿数据邀您线上共赴DTCC2022 中国数据库技术大会(内含门票福利)
大数据时代,追求极速数据处理性能的场景越来越多,单纯基于磁盘架构的数据库性能逐渐无法满足用户需求。如何自主构建高性能的数据库以充分释放大数据价值,成为诸多行业正面临的挑战和积极探索的方向。
资讯 2022-12-14
-
微软更新补丁再出问题,会影响固态硬盘寿命
根据外媒报道,微软已经明确定位了一个更新补丁的问题,将在Windows 10 2020H2版本中进行修复,这个问题将会影响用户的SSD寿命。据悉,该问题是因为微软对Windows系统的磁盘碎片优化
资讯 2020-08-31
-
戴尔科技集团卓越数据保护解决方案为企业上云提供全面保护
业界领先的可变长度重复删除技术使得数据保护效率大幅提升,可以为虚拟环境、远程办公室、企业应用程序、网络连接存储(NAS)服务器和台式/笔记本电脑提供快速、高效的备份和恢复,实现了最大限度减少磁盘需求,节省容量,从而缩短了备份时间,消除了备份瓶颈并降低了存储成本。
厂商动态 2020-01-14
-
南华附二医院:一次三维CT产生上千小文件,浪潮分布式存储给3D医疗影像加速
目录切分为若干个分片,以解决大目录以及大目录操作性能问题。同时,浪潮分布式存储AS13000对小于一定大小的文件以聚合对齐(4MB)的方式写入聚合文件中,从而减少写入、删除时的磁盘压力,提高小文件场景下的写、顺序读、删除、重构等性能。
厂商动态 2019-09-10
-
杜绝浪费 教你如何快速清理Docker资源
如果经常使用 docker,你会发现 docker 占用的资源膨胀很快,其中最明显也最容易被察觉的应该是对磁盘空间的占用。本文将介绍如何快速的清理 docker 占用的系统资源,具体点说就是删除那些无用的镜像、容器、网络和数据卷。
技术 2018-06-14
-
纵观NSA数据泄露史,AWS需要付出多大代价?
据外媒报道,NSA又经历了一次数据泄露危机。这次遭受泄露危机的是美国陆军情报项目“红色磁盘(Red Disk)”的相关数据资料,足足100GB以上的数据都被曝光在AWS的公共储存服务器上。
资讯 2017-11-30
-
DNA存储将投入商业运营 数据可保存千年
数据依旧保存在磁盘上。我们尚未解决的存储问题是如何长久保存——这就是人造DNA上存储数据方面真正可能发光的领域。
资讯 2017-11-29
-
听“同有老古董” 说存储的故事
1956年9月,当IBM发布那台仅能存储4.4M数据,拥有50个24英寸硬磁盘的IBM Model350硬盘,标志着世界上第一台存储硬盘的诞生。1980年,薄膜磁头技术的发展,为进一步减小硬盘体积
厂商动态 2017-09-26