运维进阶训练营 -W11H

一、对象存储的特点及使用场景：对象存储是一种分布式的存储技术，将数据以对象的形式存储在分布式存储集群中。相比于传统的文件系统存储，对象存储有以下特点：

• 可扩展性：对象存储可以轻松地扩展存储容量。

• 高可用性：对象存储将数据复制到多个节点，确保数据的可用性。

• 低成本：对象存储可以使用廉价的硬件构建，相比于传统的存储方式更具有成本优势。

• 支持多租户：对象存储可以为多个租户提供服务，每个租户的数据是相互隔离的。

对象存储一般应用于以下场景：

• 静态网站存储：对象存储可以存储静态网页、图片、视频等静态资源，提供高可用、高扩展性的静态网站服务。

• 大数据存储：对象存储可以存储大量的数据，支持高并发读写，适合大数据存储和分析。

• 备份存储：对象存储可以提供可靠的备份存储服务，确保数据的安全性和可用性。

二、在两台主机部署 radowsgw 存储网关以实现高可用环境：Radosgw 是 Ceph 的一个组件，提供了 S3 和 Swift 协议的对象存储接口。要实现高可用环境，可以在两台主机上部署 radosgw 存储网关，然后通过负载均衡器将请求分发到不同的节点，实现高可用性。

具体步骤如下：

1. 在两台主机上安装 Ceph，并启动 Ceph 集群。

2. 在两台主机上安装 radosgw 组件：

yum install ceph-radosgw

1. 配置 radosgw，修改/etc/ceph/ceph.conf 文件和/etc/ceph/ceph.client.radosgw.keyring 文件，确保 radosgw 可以与 Ceph 集群正常通信。

2. 在两台主机上启动 radosgw：

systemctl start ceph-radosgw@rgw.node1systemctl start ceph-radosgw@rgw.node2

1. 配置负载均衡器，将请求分发到不同的节点。

三、基于 s3cmd 实现 bucket 的管理及数据的上传和下载：s3cmd 是一个命令行工具，可以管理 S3 对象存储桶，并进行文件的上传和下载。

具体步骤如下：

1. 安装 s3cmd：

yum install s3cmd

1. 配置 s3cmd，运行以下命令进行配置：

s3cmd --configure

在配置过程中，需要输入 Access Key 和 Secret Key，以及 S3 存储桶的地址。

1. 创建存储桶：

s3cmd mb s3://bucket-name

1. 上传文件：

s3cmd put /path/to/local/file s3://bucket-name/file

1. 下载文件：

s3cmd get s3://bucket-name/file /path/to/local/file

1. 列出存储桶中的所有文件：

s3cmd ls s3://bucket-name

四、基于 Nginx+RGW 的动静分离及短视频案例：Nginx 是一款常用的 Web 服务器和反向代理服务器软件，可以实现动静分离。结合 Ceph 的 radosgw 组件，可以实现短视频的存储和分发。

具体步骤如下：

1. 在两台主机上安装 Ceph 和 radosgw 组件，并启动 Ceph 集群和 radosgw。

2. 安装 Nginx，并配置 Nginx 的反向代理：

在 Nginx 配置文件中添加如下内容：

upstream rgw_servers {    server rgw.node1:80;    server rgw.node2:80;}
server {    listen 80;    server_name video.example.com;
    location / {        proxy_pass http://rgw_servers;    }
    location /static/ {        root /var/www;    }}

这里定义了一个名为 rgw_servers 的 upstream，将请求分发到两个 radosgw 节点上。同时，配置了一个 location /static/，将静态资源存储在 Nginx 服务器上，而不是存储在 Ceph 集群中。

1. 在 Ceph 集群中创建存储桶，并上传短视频文件：

s3cmd mb s3://video-buckets3cmd put /path/to/video.mp4 s3://video-bucket/video.mp4

1. 在 Nginx 服务器上创建静态资源目录，并将短视频文件复制到该目录下：

mkdir /var/www/statics3cmd get s3://video-bucket/video.mp4 /var/www/static/video.mp4

1. 访问 Nginx 服务器，可以通过 video.example.com/static/video.mp4 的地址访问短视频。

五、启用 ceph dashboard 并基于 prometheus 监控 ceph 集群运行状态：Ceph Dashboard 是 Ceph 集群的 Web 管理界面，可以通过浏览器访问 Ceph 集群的状态和性能指标。结合 Prometheus 监控系统，可以实现对 Ceph 集群的实时监控和性能分析。

具体步骤如下：

1. 启用 Ceph Dashboard，运行以下命令启用 Ceph Dashboard：

ceph mgr module enable dashboard

1. 访问 Ceph Dashboard，通过浏览器访问 Ceph Dashboard 的地址，例如 https://ceph.example.com:8443。

2. 配置 Prometheus，将 Ceph Dashboard 的性能指标导出到 Prometheus 中。在 Prometheus 的配置文件中添加以下内容：

- job_name: 'ceph-dashboard'  scrape_interval: 15s  metrics_path: /api/mgr/dashboard/metrics  scheme: https  tls_config:    insecure_skip_verify: true  static_configs:    - targets: ['ceph.example.com:8443']

1. 重新启动 Prometheus，并访问 Prometheus 的 Web 界面，可以实时监控 Ceph 集群的性能指标。