2024/6/22

云计算/大数据组网及技术

本人在大数据、存储这块算是偏弱的,尤其存储,现在存储的形态和技术是越来越多,基于个人理解梳理了下常见的组网及技术,根据网络来划分的,先留个底,等我再学习学习进行更新吧。

  • 存储技术
  • 2024/6/22
  • 145
  • 2022/6/23

    OSS对象存储详解

    什么是对象存储 对象存储不同厂家称呼不一,有叫OBS,有OSS等,但原理基本相同,下文以OSS表示对象存储。OSS是一种分布式存储系统,具有用户-桶-对象三层结构,用户即使用对象存储服务的自然人,在存储系统中对应的…

  • 存储技术
  • 2022/6/23
  • 418
  • 2022/6/11

    ISCSI存储之Target、LUN、IQN、TGP

    ISCSI通信原理 我们知道,ISCSI是SCSI封装TCP/IP的结果,可以实现在IP网络上运行SCSI协议,本质上是iSCSI就是用广域网仿真了一个常用的高性能本地存储总线,从而创建了一个存储局域网(SAN)。 ISCSI通信过程 一些概…

  • 存储技术
  • 2022/6/11
  • 621
  • 2022/6/10

    SAN存储传输协议、组网详解

    传输协议 SAN存储组网分为IP SAN和FC SAN,传输协议又分为iSCSI协议、FC协议、FCoE协议三种,三种使用场合和对交换机的要求也不同。 ISCSI协议 SCSI协议 在了解ISCSI协议之前,先了解一下SCSI协议,SCSI协议,即Sma…

  • 存储技术
  • 2022/6/10
  • 891
  • 2022/6/7

    EC纠删码技术详解

    什么是EC纠删码 EC(Erasure Coding,纠删码)技术是将一份数据切分成N块原始数据,基于N块原始数据计算获得M块冗余数据,并将N+M块数据分别存放在存储系统中的不同存储节点上,当其中任意M块数据(N+M块数据中任意…

  • 存储技术
  • 2022/6/7
  • 710
  • 2022/6/7

    多副本技术详解

    什么是多副本 多副本技术是分布式存储系统中的一种数据安全冗余技术,数据在写入后会按需生成多份副本,并根据设置将数据主从副本存储在不同的硬盘、服务器、机柜、机房中,以此保证在硬盘损坏、服务器损坏、机柜损…

  • 存储技术
  • 2022/6/7
  • 401
  • 2022/6/7

    磁盘阵列RAID详解

    什么是RAID 磁盘阵列是由很多块独立的磁盘,组合成一个磁盘组,利用部分磁盘提供数据所产生加成效果提升整个磁盘系统效能。利用这项技术,将数据切割成许多区段,分别存放在各个硬盘上。 RAID分类 分为RAID O、RAID…

  • 存储技术
  • 2022/6/7
  • 486
  • 2022/6/6

    集中/分布式、块/文件/对象存储的特点机应用场景区别

    集中式存储&分布式存储 两者属于部署架构的区别,均可为前端应用主机提供存储系统。 分布式存储 1.分布式存储一般是将分布式存储软件部署在标准X86/ARM服务器上,如Ceph(适合建设云平台)、GlusterFS(适合建…

  • 存储技术
  • 2022/6/6
  • 391
  • 2022/6/1

    基于Ceph的某分布式存储系统部署测试

    部署环境 本次部署使用环境: 三台云主机,8C/16G/60G/200G,网络只使用了系统带内网络。 3节点-各8C16G 6块100G数据盘-单节点各挂2块 生产环境配置: 生产环境一般根据实际情况配置,一般3节点起步,需要配置带…

  • 存储技术
  • 2022/6/1
  • 554
  • 2022/6/1

    基于Ceph的某分布式存储系统学习

    软件架构 系统逻辑架构 说明: 1.一套系统即可提供ISCSI/FC块存储、对象存储、文件存储。 2.支持的标准协议:块存储LibRBD/SCSI/ISCSI/FC、对象存储S3/NFS、文件存储NFS/SMB/FTP。 3.包含多种数据服务技术、高级存…

  • 存储技术
  • 2022/6/1
  • 808