RGW层读取create-multipart信息:get_multipart_info()

1 概述

static int get_multipart_info()函数的主要功能是获取分段上传的ACL、placement rule以及一些元数据。

首先来看get_multipart_info函数:

cpp 复制代码
static int get_multipart_info(RGWRados *store, struct req_state *s,
			      const string& meta_oid,
                              RGWAccessControlPolicy *policy,
			      map<string, bufferlist> *attrs,
                              multipart_upload_info *upload_info)
{
  map<string, bufferlist>::iterator iter;
  bufferlist header;

  rgw_obj meta_obj;
  meta_obj.init_ns(s->bucket, meta_oid, mp_ns); // mp_ns是RGW_OBJ_NS_MULTIPART,也就是multipart
  meta_obj.set_in_extra_data(true);

  return get_multipart_info(store, s, meta_obj, policy, attrs, upload_info);
}

在执行get_multipart_info函数之前有这一步:

cpp 复制代码
RGWMPObj mp(s->object.name, multipart_upload_id);

op_ret = get_multipart_info(store, s, mp.get_meta(), nullptr, nullptr, &upload_info);

就是将文件名和upload id初始化成了一个RGWMPObj,阅读RGWMPObj的初始化函数可以得知mp.get_meta()的结果就是:oid.upload_id.meta,也就是get_multipart_info函数的meta_oid参数;接着初始化完成一个rgw_obj,接着调用同名重写函数get_multipart_info():

cpp 复制代码
static int get_multipart_info(RGWRados *store, struct req_state *s,
			      const rgw_obj& obj,
                              RGWAccessControlPolicy *policy,
			      map<string, bufferlist> *attrs,
                              multipart_upload_info *upload_info)
{
  ...

  int op_ret = get_obj_head(store, s, obj, attrs, pheadbl);
  ...

  if (upload_info && headbl.length() > 0) {
    auto hiter = headbl.cbegin();
    try {
      decode(*upload_info, hiter);
    } 
    ...
  }

  if (policy && attrs) {
    for (auto& iter : *attrs) {
      string name = iter.first;
      if (name.compare(RGW_ATTR_ACL) == 0) {
        bufferlist& bl = iter.second;
        auto bli = bl.cbegin();
        try {
          decode(*policy, bli);
        }
        ...
      }
    }
  }

  return 0;
}

首先get_obj_head调用了两个主要函数,一个是RGWRados::Object::Read::prepare(),另一个是RGWRados::Object::Read::read(),prepare()函数的主要作用:

  1. 准备要读取的对象名称,在分段上传中就是要读取位于.rgw.non-ec池中的头对象,其名称为"<bucket_id>_" + "multipart" + <key-name> + "." + <upload_id> + ".meta"

  2. 校验一些读条件的header,这些header来自http请求中的If-Match/If-None-Match等等
    这里详细的代码不过多赘述,读者可以自行探究。
    read()函数的作用则是下发一个同步请求读取对象中的内容。

    在get_multipart_info中会将读上来的multipart_upload_info和其他attrs属性的bufferlist依次解析出来,其中multipart_upload_info记录的就是目标对象写入锁遵循的placement rule。

相关推荐
燃于AC之乐1 小时前
深入解剖STL Vector:从底层原理到核心接口的灵活运用
开发语言·c++·迭代器·stl·vector·源码分析·底层原理
优雅的潮叭7 小时前
c++ 学习笔记之 chrono库
c++·笔记·学习
星火开发设计8 小时前
C++ 数组:一维数组的定义、遍历与常见操作
java·开发语言·数据结构·c++·学习·数组·知识
月挽清风8 小时前
代码随想录第七天:
数据结构·c++·算法
点云SLAM9 小时前
C++内存泄漏检测之Windows 专用工具(CRT Debug、Dr.Memory)和Linux 专业工具(ASan 、heaptrack)
linux·c++·windows·asan·dr.memory·c++内存泄漏检测·c++内存管理
浅念-10 小时前
C语言小知识——指针(3)
c语言·开发语言·c++·经验分享·笔记·学习·算法
无限进步_11 小时前
【C++】大数相加算法详解:从字符串加法到内存布局的思考
开发语言·c++·windows·git·算法·github·visual studio
C+-C资深大佬12 小时前
C++ 数据类型转换是如何实现的?
开发语言·c++·算法
oioihoii13 小时前
回归测试:软件演进中的质量守护神与实践全指南
c++
十五年专注C++开发14 小时前
CMake基础: 在release模式下生成调试信息的方法
linux·c++·windows·cmake·跨平台构建