Amazon S3は、オンラインストレージサービスの代表的な存在であり、様々なアプリケーションで利用されています。しかし、S3を利用するためには、AWSのアカウントを持っている必要や費用を気にしなければなりません。 そこで、今回はローカル環境にS3を構築する方法をまとめていきます。具体的には、MinIOというオープンソースのツールを利用して、ローカル環境にS3を構築する方法をdockerを使って説明します。 開発環境 Docker：v20.10.22 Docker Compose：v2.15.1 MinIO：RELEASE.2023-02-27T18-10-45Z Docker Compose V2を使っています。 V1を使っている場合は正しく動作しない場合もありますのでご確認ください。 MinIOとは？ MinIOは、Amazon S3互換の分散オブジェクトストレージシステムです。つまり
こんにちは。F.S.です。 今回は2021年初から市場を賑わしているNFT（Non-Fungible Token）と関連の強い技術であるIPFSのトピックとして、データストアにAmazon S3を使う方法を紹介します。 1.結論 コンテンツデータをAmazon S3にストアするIPFSノードを立てるポイントは下記の通りとなります。 公式のプラグイン go-ds-s3 を使う go-ipfs本体にプラグインを組み込んでビルドするのが確実 コンテンツのブロックデータを格納する領域のみS3を使うように設定する 概ね go-ds-s3 のREADMEにある手順の通り実施することで動作します。 2.IPFSの概要 IPFS（Interplanetary File System）はP2P型のハイパーメディアプロトコルで、非中央集権的な分散ファイルシステムです。 2-1.特徴 IPFSのデータを取り出す
Amazon S3って？ 追記: 以下の記事で紹介したS3互換環境を使って，サムネイルサーバーを作ってみました！！ サーバーレスの入門に！自宅サーバーレス+自宅S3環境で作るサーバーレス・サムネイルサーバー！ ざっくりというとAmazonが提供している"ファイルサーバーのようなもの"です． 公式ドキュメントによると Amazon Simple Storage Service はインターネット用のストレージサービスです。また、ウェブスケールのコンピューティングを開発者が簡単に利用できるよう設計されています。 引用：Amazon S3 とは何ですか？ 厳密にはAmazon S3はオブジェクトストレージの一種で， オブジェクトストレージはデータをファイル単位やブロック単位ではなく、オブジェクトという単位で扱います。オブジェクトにはストレージシステムのなかで固有のID（URI）が付与され、データと
AWSを使った静的Webサイトの公開 第1回 Amazon S3の利用方法と料金 さまざまな場面で利用されるAmazon Web Services。このサービスの中から、フロントエンド・エンジニアにとっても扱いやすいAmazon S3を利用して静的なWebサイトを公開する方法を紹介します。まずはそのサービス概要と料金形態について詳しく見てみましょう。 はじめに 最近は、さまざまな場面でAmazon Web Services（以下、AWSと表記します）が利用されるケースが増えてきました。しかし、多くのサービスから構成されるAWSはどのように使ったらよいか、わかりづらいと思っている方も多いのではないでしょうか。 今回はAWSが提供しているサービスの一つであり、フロントエンド・エンジニアにとっても扱いやすい Amazon Simple Storage Service（Amazon S3、以下S3
AWS CLIを使ってS3をWeb公開
AWS S3 のドキュメントに S3 の Web ホスト機能を利用したシステム構築例が2つあったので、これらを AWS CLI でコマンドラインから操作するよう移植した。 Example: Setting Up a Static Website Example: Setting Up a Static Website Using a Custom Domain Example: Setting Up a Static Website In the first example you configure a bucket for website hosting, upload a sample index document and test the website using the Amazon S3 website endpoint for the bucket. AWS CLI の s
AWS News Blog
AWS Week in Review – AWS Documentation Updates, Amazon EventBridge is Faster, and More – May 22, 2023 Here are your AWS updates from the previous 7 days. Last week I was in Turin, Italy for CloudConf, a conference I’ve had the pleasure to participate in for the last 10 years. AWS Hero Anahit Pogosova was also there sharing a few serverless tips in front of a full house. Here’s a picture I […] Amaz
たとえばこんな使い方 画像と HTML ファイルを中心としたウェブサイトなら、Amazon S3 で充分に活用できるから、使い道も広がります。 急ぎのウェブサイト公開が必要となる場合も多いキャンペーンサイトも、Amazon S3 なら数分でアカウント作成、コンテンツの公開も 10 分程度で完了します。しかも契約期間の縛りもないため、すぐはじめられて、キャンペーン終了後、必要がなくなったその時点で終了することも可能です。 詳しくはこちら » 法人ウェブサイトのデータ損失は絶対に避けたいものです。米国の政府機関をはじめエンタープライズ企業様も利用する Amazon S3 は、複数のデータセンターでお客様のウェブサイトデータを保管。99.99 % の可用性と、99.999999999 % の堅牢性でお客様のウェブサイトを運営することができます。 もちろん万全を期すために、別のリージョン（国）の
Amazon S3 を使用して静的ウェブサイトをホスティングする - Amazon Simple Storage Service
Amazon S3 を使用して、静的ウェブサイトをホストできます。静的ウェブサイトでは、個々のウェブページの内容は静的コンテンツです。ほかに、クライアント側スクリプトが含まれていることもあります。 対照的に、動的ウェブサイトはサーバー側処理に依存しており、例えば、サーバー側スクリプト (PHP、JSP、ASP.NET など) が使用されます。Amazon S3 はサーバーサイドスクリプトをサポートしていませんが、AWS には動的ウェブサイトをホストするための他のリソースがあります。AWS でのウェブサイトホスティングの詳細については、「ウェブホスティング」を参照してください。 AWS Amplify コンソールを使用して、単一ページのウェブアプリケーションをホストできます。AWS Amplify コンソールは、単一ページのアプリケーションフレームワーク (React JS、Vue JS、A
お仕事の絡みで、タイトルの要件が必要になりそうだったので備忘録も兼ねて。 前提 EC2 の Distribution は Amazon Linux インスタンスは AutoScale によって増えたり減ったりする やること S3 Bucket の準備 IAM の準備 IAM User で対応する場合 IAM Role で対応する場合 s3fs のインストール s3fs の設定・起動 やりかた S3 Bucket の準備 まぁ、普通に Management Console から追加するだけ。 ログとかはご随意に。 IAM の準備 二通りのやり方があるので、お好みで。 IAM User で対応する場合 このケースは、EC2 起動時のオプションとして IAM Role を 割り当てたくない(られない) 場合に使うと良いか？ IAM Management Console で Create a Ne
おまけ 今回調査に使ったシェルスクリプト載せておきます。 権限毎にバケット何個も作って、オブジェクトも作って、アクセスしてみて、終わったら削除してという感じのものです。 #!/bin/bash UNIQ=$(date +'%Y%m%d%I%M%S') alias aws='aws --region ap-northeast-1' BUCKET_PREFIX=akeri-acl-test-$UNIQ- TARGET_PRINCIPAL="arn:aws:iam::123456789012:user/s3acltest" TARGET_MAIL="example@example.com" # create Bucket Policy Document UPLOADFILE=akeridayo.txt IAM_USERNAME=s3acltest echo "akeridayo" > $UPLO
New Solution – Clickstream Analytics on AWS for Mobile and Web Applications Starting today, you can deploy on your AWS account an end-to-end solution to capture, ingest, store, analyze, and visualize your customers’ clickstreams inside your web and mobile applications (both for Android and iOS). The solution is built on top of standard AWS services. This new solution Clickstream Analytics on AWS a
Amazon S3による静的Webサイトホスティング
2. Who am I ? 堀内 康弘 (ほりうち やすひろ) • 1978年年⽣生まれ ⼭山梨梨県出⾝身 AWS テクニカルエバンジェリスト • 130回以上の講演 ※2012年年の実績 • 35回以上のハンズオン • 120本以上のブログ記事(AWSの最新情報を投稿) Amazon Web Services ブログ http://aws.typepad.com/aws_̲japan/ 10+ years web engineer in startups • Director of V-‐‑‒cube (perl), 2001 -‐‑‒ 2006 • CTO of FlipClip (perl), 2006 -‐‑‒ 2009 • CTO of gumi (python), 2009 -‐‑‒ 2012 @horiuch
MySQL データベースを Amazon S3 にバックアップするスクリプト 自宅サーバで運用している MySQL データベースのデータを Amazon S3 にバックアップするためのスクリプトを作成したので公開。 今回作成したスクリプトでは、 ローカルディレクトリに YYYYMMDD 型式で 7 世代分のデータをフルダンプし、 毎週日曜日の深夜に Amason S3 に当日分のバックアップを転送している。 mysqldump で取得したバックアップデータに VIEW 情報が含まれていると データベースのレストア時にエラーが発生する可能性がある様なので、 mysqldump 時に VIEW 定義は除外してダンプを取得し VIEW 情報のみを別途ダンプする様にしている。 Amason S3 への転送は S3 tools が公開している s3cmd を利用しているので、 s3cmd と pyt
課金ポイントは3つ そんなに難しいことはないと思いますが 課金ポイントは3つ あります。 ##ストレージ容量 単純に保存容量に対して課金されます。 低冗長化ストレージを指定すると2割くらい安くできます。 ログだとか家族写真の保存だとかメインだとデータ転送よりここにお金がかかってきます。（容量でかいけど古いやつは殆どアクセスしないようなのはライフサイクル設定でGlacierに移動する手もあります） ##データ転送 課金されるのは(S3からの)送信だけです。受信（S3へのアップロード）は無料です。 また、インターネットへの送信と別のAWSリージョンまたはCloudFrontへの送信で別料金が設定されてますが、小～中規模のシステムならサーバ群は1リージョンに纏まってることが多いでしょうから、CroudFront利用時くらいにしかその料金は発生しないと思います。しかもCroudFront利用時は殆
先日「WordPressのブログをherokuで立ち上げて、何かメリットあるの？」というブログを書きました。 「画像アップロードできる方法は、要望があったら書きます」と書いたところ、Messageleaf経由で応援のメッセージをいただきましたので、早速書いてみたいと思います！ ちょっと待って、WordPressは何も設定しなくてもファイルアップロードできるでしょ？？ できるのですが、Herokuアプリを再起動すると、Gitでバージョン管理されていないファイルは消えてしまいます。 なので、アップロードはできるけれども、アップロードしたファイルは消えてしまうかも知れないのです。 そこで、外部のサービスに画像ファイルを保存することで、画像ファイルが消えないようにする必要があります。 今回は Amazon Web ServiceのS3という安価で使い勝手の良いストレージサービス WordPress
S3を使う時のベストプラクティス（を訳してみた） - サーバーワークスエンジニアブログ
最近子どもの水いぼを取る際に、麻酔テープが健康保険適応内である事を知った小室＠福岡です。 AWSのドキュメントの一つに、Articles & Tutorialsという物が有ります。これはAWSの中の人、また使っているユーザーがこのように使うといいよ、とAWSをよりよく使える方法を教えてくれる場所です。 サーバーワークスでは、日々のAWSのドキュメントの確認だけではなく、このようなArticles & Tutorialsを読みより深くAWSのサービスについて理解を深めようと個々に担当し、社内発表会を行っています（始めたばかりだけどね！）。 今回私が訳してみたのはこちらです。 Best Practices for Using Amazon S3 この記事は2008年に投稿(更新2009年)されており、現在とは少し違うかもしれませんが、とても参考になりましたので、ご紹介したいと思います。 ※これ
1. はじめてのアマゾンクラウド③ 『S3にWebコンテンツを保存』 エバンジェリスト 玉川憲 Twitter: @KenTamagawa アマゾン データ サービス ジャパン株式会社 Ver0.9.1: 更新日: 2011年3月12日 2. 事前準備 AWSのアカウントを開設し、Amazon S3の申し込みが済んでいるかご確 認ください またの方は、「AWSのアカウントを開設する」を参照ください。 インターネットアクセス Webブラウザ（Firefox推奨） 注：このガイドは、お客様がAWSを実践されるのを補助する目的で作られており、非公式のドキュ メントです。このガイドの実施はご自身の責任でお願い致します。どのような性質の損害につ いても当方は責任を負いません。 3. • Webブラウザを立ち上げます • AWSのホームページのhttp://aws.amazon.com/jp/にアクセ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
