AWS s3开发环境搭建

本文为博客 VIP 文章,开通 VIP 后可阅读全文

开通 VIP

工程中需要用到s3对象存储接口向ceph存储中存储视频对象,对s3开发环境搭建及测试过程做下记录。

centos7安装s3cmd

yum install s3cmd

安装s3cmd的作用是测试使用命令行测试s3向ceph存储对象的可行性,需要ceph集群开启radosgw,查看该服务端口的命令netstat -ntlp|grep radosgw,默认端口是7480,访问测试:

[root@bogon test]# curl http://192.168.231.211:7480
<?xml version="1.0" encoding="UTF-8"?><ListAllMyBucketsResult xmlns="http://s3.amazonaws.com/doc/2006-03-01/"><Owner><ID>anonymous</ID><DisplayName></DisplayName></Owner><Buckets></Buckets></ListAllMyBucketsResult>

radosgw用户管理

在ceph服务端创建用户

sudo radosgw-admin user create --subuser="cephtester:subtester" --uid="cephtester" --display-name="cephtester" --key-type=swift --secret="654321" --access=full

s3cmd安装、配置、测试访问、数据同步对象存储Hitachi Content Platform (HCP) 需要先安装python。我的环境是centos7,其它环境,请根据实际情况安装。成功列出桶hcmans 和 n1。成功列出桶n1中的对象。github开源参考。 阅读详情

相关推荐

AWS S3 上传文件

目的是为了要上传大一些的文件,如果中间网络出现问题,后面可以有断点续传类似的功能。 1.官方S3使用的例子 https://github.com/aws/aws-sdk-go/blob/master/service/s3/examples_test.go 非官方mulitpart上传的例子 https://github.com/apoorvam/aws-s3-multipart-uploa...

harryhare的专栏 2万+

亚马逊云代理商:AWS S3 怎么上传下载文件?

本文介绍了AWS S3 对象存储服务的核心优势与实用操作指南。S3凭借无限扩容、高可靠和全球可访问等特点,成为个人和企业数据存储的理想选择。文章详细讲解了从创建存储桶、上传文件到检索下载的完整流程,包括控制台可视化操作和CLI命令行两种方式,并重点说明权限管理、版本控制等安全功能。通过合理配置存储类、生命周期规则等高级功能,用户可进一步优化成本与效率。无论是个人备份还是企业级存储需求,S3都能提供安全稳定、经济高效的解决方案。

TG_yilong_cloud的博客 428

aws s3 cli_了解AWS CLI –使用AWS CLI与AWS S3存储桶进行交互

aws s3 cli It is the second article in the Learn AWS CLI series. It gives you an overview of working with the AWS S3 bucket using CLI commands. We also look at a brief overview of the S3 bucket and...

culuo4781的博客 1878

s3cmd安装、配置及使用

S3cmd 是一个用于管理 Amazon S3 和其他兼容 S3 存储服务(如 MinIO、DigitalOcean Spaces 等)的命令行工具。它提供了便捷的文件上传、下载、同步、删除等操作。

lldhsds的专栏 7091

LINUX系统下安装配置s3cmd

s3cmd download | SourceForge.net前往下载最新版下载后是一个tar包,需要解压:: s3cmd安装完毕。 配置的各项细节参考了这篇文章:ceph基础篇4——对象存储rgw的访问方式之S3cmd - 百度文库 成功后会提示.s3cfg保存路径,有些人默认保存在root下,我的可能是权限问题,保存在home下了。 可以输入命令行更改,其实和刚才 s3cmd --configure的效果是一样的,只是这里能展现更多参数,更为直观。 配置成功后可以验证一下b

jiqishou287的博客 4940

LocalStack极速入门:10分钟零成本搭建离线AWS开发环境(S3+Lambda实战)

你还在为AWS开发环境配置繁琐而烦恼?每次测试都担心产生云服务费用?本文将带你10分钟内搭建完全离线的AWS S3+Lambda开发环境,无需信用卡,无需网络连接,让云应用开发效率提升300%。 读完本文你将获得: - 本地化AWS服务的完整搭建流程 - S3存储桶创建与文件操作实战 - Lambda函数本地部署与触发配置 - 离线环境下的服务联动测试方法 ## 为什么选择LocalStack...

gitblog_00197的博客 812

面向专业C++开发人员的AWS S3综合指南

AWS S3综合指南(C++开发者版)摘要 本文为C++开发者提供全面的AWS S3使用指南,涵盖架构理解、环境搭建和核心操作。主要内容包括: S3架构解析:详细说明存储桶、对象和键的分布式对象存储模型,强调区域选择对性能和法律合规的影响。 开发环境配置:提供跨平台构建指南,重点介绍使用CMake和vcpkg管理AWS SDK for C++,以及安全的凭证管理实践。 SDK核心机制:深入讲解SDK生命周期管理(InitAPI/ShutdownAPI)、RAII应用模式,以及线程安全的S3Client设计。

greenspan的专栏 1274

AWS的s3存储的java实现-gradle构建环境

将开发工具包与 Gradle 一起使用,要在 Gradle 项目中使用适用于 Java 的 AWS 开发工具包,请使用 Spring 的适用于 Gradle 的依赖项管理插件,使用该插件,可以导入开发工具包的 Maven 材料清单 (BOM) 以管理项目的开发工具包依赖项,配置适用于 Gradle 的开发工具包。 1.向 build.gradle 文件中添加依赖项管理插件 apply pl

用心丈量世界 4877

大数据与AWS开发环境配置:dev-setup aws.sh使用全攻略

想要快速搭建一个专业的大数据和AWS开发环境吗?dev-setup项目的aws.sh脚本为你提供了一站式解决方案!这个终极指南将带你了解如何通过简单的脚本命令配置完整的云端开发环境,让你的数据分析工作事半功倍。💻 ## 什么是dev-setup aws.sh? aws.sh是dev-setup项目中的一个重要组成部分,专门用于配置**大数据和AWS开发环境**。它能够自动化安装和管理各种AW

gitblog_00260的博客 640

LocalStack开发环境搭建终极指南:从零开始构建本地AWS云环境

LocalStack是一个功能齐全的本地AWS云栈,让开发者能够离线开发和测试云应用及Serverless应用。本指南将帮助你从零开始搭建LocalStack开发环境,无需连接AWS云服务即可实现本地开发与测试。 ## 为什么选择LocalStack? LocalStack为开发者提供了一个完整的本地AWS模拟环境,具有以下核心优势: - **完全离线开发**:无需连接AWS云服务,所有操作

gitblog_00401的博客 305

如何快速上手AWS Mobile React Native Starter:从零开始的完整教程

AWS Mobile React Native Starter是一个功能强大的开源项目,它能帮助开发者快速构建基于React Native的移动应用,并无缝集成AWS云服务。本教程将为你提供从零开始的完整指南,让你轻松掌握这个项目的安装、配置和基本使用方法。 ## 项目简介:什么是AWS Mobile React Native Starter? AWS Mobile React Native

gitblog_00811的博客 422

30分钟极速上手:p5.js Web Editor全平台开发环境搭建指南

你还在为创意编程工具的环境配置浪费数小时?还在因依赖冲突、版本不兼容而放弃创作?本文将通过**手动部署**和**Docker容器化**两种方案,带你在30分钟内完成p5.js Web Editor开发环境搭建,从源码编译到实时预览一步到位,让你专注于创意编程本身。 读完本文你将获得: - 兼容Windows/macOS/Linux的双部署方案 - 解决90%常见环境配置错误的排障指南 - 开发效...

gitblog_00346的博客 562

AWS S3的使用

这两天Web这边有一个功能需求,使用到了AWS 的S3服务,这个东西在国内访问很慢,所以,一般也少有人使用,我们的业务主要在美国,所以,使用这个服务还是非常好的。国内的阿里云做到了云计算的龙头,我还是希望AWS北京数据中心能够尽快的开放出来,从去年中就开始公测,现在依然也没有个信儿,国内的境外企业的管制可真是严格。希望两方的加快工作进度吧。亚马逊给出的SDK实在是很多,各种语言的都有,不愧是大厂。

know yourself 1万+

aws s3命令手册

本命令手册旨在为用户提供详尽的aws s3命令解释与用法指南,帮助用户轻松掌握并高效利用aws s3进行文件上传、下载、同步、删除等操作。

qq_52098522的博客 4262

Python实现链接AWS S3,并将数据上传到AWS S3

本文是该专栏的第40篇,后面会持续分享python的各种干货知识。使用python在处理某些项目的时候,偶尔会遇到需要将“本地数据源”或“数据库数据”上传到AWS S3的需求。AWS S3(Simple Storage Service)是一个公开的服务,Web应用程序开发人员一般可以使用它存储海量数字资产。通常情况下,我们获取到数据源之后,一般都会想着将数据存入数据容器。对于数据量偏小的情况,mysql几乎都能满足存储需求,而当数据量达到上亿级的时候,mysql基本上就比较吃力了,这时如果考虑将数据存...

Python进阶专栏《爬虫实战进阶》,《Pyppeteer从入门到精通》原创作者 2228

AWS入门】Amazon S3简介

本文简要介绍数据存储类型,以及通过获取官方数据,来组织一场关于亚马逊存储的需要讨论吧。

jackson_lingua的博客 2008

AWS S3服务

写在开头 最近工程中做了一个视频上传的相关需求,使用了亚马逊AWS S3服务作为存储,关于IOS的资料比较少,也填了不少坑,这里总结一下: S3服务 Amazon Simple Storage Service (Amazon S3) 是一种对象存储服务,提供行业领先的可扩展性、数据可用性、安全性和性能。自己去查官网吧:https://aws.amazon.com/cn/s3/ ...

阿飞小伙子_博客 4957
上一篇: librados开发环境搭建
下一篇: YUM源(rpm安装包)制作使用流程说明
worker_program
博客等级 码龄5年 2粉丝 · 7原创
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值