2024/6/22

云计算/大数据组网及技术

本人在大数据、存储这块算是偏弱的,尤其存储,现在存储的形态和技术是越来越多,基于个人理解梳理了下常见的组网及技术,根据网络来划分的,先留个底,等我再学习学习进行更新吧。

  • 存储技术
  • 2024/6/22
  • 11
  • 2023/9/14

    FIO磁盘测试

    巩固下动手动力 测试计划 使用三台华为2288H搭建虚拟化测试环境,分别测试物理机环境下和虚拟机环境下磁盘测试,至少三次。 物理机配置:2*Gold 5218/16*32G DDR4 2933/2*1.2T SAS/4*6.4T P4610/RAID 9460-8I/4*1G…

  • 存储基础 操作系统
  • 2023/9/14
  • 272
  • 2022/6/23

    OSS对象存储详解

    什么是对象存储 对象存储不同厂家称呼不一,有叫OBS,有OSS等,但原理基本相同,下文以OSS表示对象存储。OSS是一种分布式存储系统,具有用户-桶-对象三层结构,用户即使用对象存储服务的自然人,在存储系统中对应的…

  • 存储技术
  • 2022/6/23
  • 285
  • 2022/6/11

    ISCSI存储之Target、LUN、IQN、TGP

    ISCSI通信原理 我们知道,ISCSI是SCSI封装TCP/IP的结果,可以实现在IP网络上运行SCSI协议,本质上是iSCSI就是用广域网仿真了一个常用的高性能本地存储总线,从而创建了一个存储局域网(SAN)。 ISCSI通信过程 一些概…

  • 存储技术
  • 2022/6/11
  • 433
  • 2022/6/10

    SAN存储传输协议、组网详解

    传输协议 SAN存储组网分为IP SAN和FC SAN,传输协议又分为iSCSI协议、FC协议、FCoE协议三种,三种使用场合和对交换机的要求也不同。 ISCSI协议 SCSI协议 在了解ISCSI协议之前,先了解一下SCSI协议,SCSI协议,即Sma…

  • 存储技术
  • 2022/6/10
  • 782
  • 2022/6/10

    SSD硬盘的寿命指标DWPD、TBW 、P/E

    DWPD DWPD全称为Drive Writes Per Day,即每日全盘写入次数,指在预期寿命内可每日完整写入SSD固态硬盘所有容量的次数。在企业级固态硬盘产品里DWPD这个参数比较常用。比如intel的企业级P4500这一款,DWPD为4.62,…

  • 存储基础
  • 2022/6/10
  • 416
  • 2022/6/9

    硬盘的总线协议与接口

    总线 计算机内部有很多的电子元件,他们之间会有数据交互和传输的需求,此时就需要一条路径,这条路径就是总线。这条路的传输性能由总线类型、协议类型和硬件性能共同决定,即总线带宽,如500M/s。 目前总线类型三…

  • 存储基础
  • 2022/6/9
  • 377
  • 2022/6/7

    EC纠删码技术详解

    什么是EC纠删码 EC(Erasure Coding,纠删码)技术是将一份数据切分成N块原始数据,基于N块原始数据计算获得M块冗余数据,并将N+M块数据分别存放在存储系统中的不同存储节点上,当其中任意M块数据(N+M块数据中任意…

  • 存储技术
  • 2022/6/7
  • 410
  • 2022/6/7

    多副本技术详解

    什么是多副本 多副本技术是分布式存储系统中的一种数据安全冗余技术,数据在写入后会按需生成多份副本,并根据设置将数据主从副本存储在不同的硬盘、服务器、机柜、机房中,以此保证在硬盘损坏、服务器损坏、机柜损…

  • 存储技术
  • 2022/6/7
  • 295
  • 2022/6/7

    磁盘阵列RAID详解

    什么是RAID 磁盘阵列是由很多块独立的磁盘,组合成一个磁盘组,利用部分磁盘提供数据所产生加成效果提升整个磁盘系统效能。利用这项技术,将数据切割成许多区段,分别存放在各个硬盘上。 RAID分类 分为RAID O、RAID…

  • 存储技术
  • 2022/6/7
  • 371
  • 2022/6/6

    集中/分布式、块/文件/对象存储的特点机应用场景区别

    集中式存储&分布式存储 两者属于部署架构的区别,均可为前端应用主机提供存储系统。 分布式存储 1.分布式存储一般是将分布式存储软件部署在标准X86/ARM服务器上,如Ceph(适合建设云平台)、GlusterFS(适合建…

  • 存储技术
  • 2022/6/6
  • 295
  • 2022/6/3

    存储小百科:形态、架构、介质、协议、接口等

    存储形态 块存储、文件存储、对象存储 块存储 块存储一般体现形式是卷或者硬盘(比如windows里面看到的c盘),数据是按字节来访问的,块存储一般需要挂载给主机系统,并在此之上安装文件系统使用,如windows或者lin…

  • 存储基础
  • 2022/6/3
  • 399