Pertanyaan yang diberi tag «amazon-s3»

Apakah ada ketergantungan antara Spark dan Hadoop ? Jika tidak, apakah ada fitur yang akan saya lewatkan saat menjalankan Spark tanpa Hadoop ?

91 hadoop  amazon-s3  apache-spark  mapreduce  mesos 

Saya perlu menulis kode dengan python yang akan menghapus file yang diperlukan dari ember Amazon s3. Saya dapat terhubung ke bucket Amazon s3, dan juga untuk menyimpan file, tetapi bagaimana cara menghapus file?

91 python  amazon-s3  bucket 

Katakanlah saya memiliki mesin yang saya inginkan untuk dapat menulis ke file log tertentu yang disimpan di bucket S3. Jadi, mesin harus memiliki kemampuan menulis ke keranjang itu, tetapi, saya tidak ingin mesin memiliki kemampuan untuk menimpa atau menghapus file apa pun di keranjang itu (termasuk yang saya inginkan untuk …

91 amazon-web-services  amazon-s3  aws-sdk  amazon-kinesis-firehose 

Saya memiliki file teks yang disimpan di S3 yang merupakan tabel tab delimited. Saya ingin memuatnya ke dalam panda tetapi tidak dapat menyimpannya terlebih dahulu karena saya menjalankannya di server heroku. Inilah yang saya miliki sejauh ini. import io import boto3 import os import pandas as pd os.environ["AWS_ACCESS_KEY_ID"] = "xxxxxxxx" …

91 python  pandas  heroku  amazon-s3  boto3 

Pertanyaan yang cukup mendasar tetapi saya belum dapat menemukan jawabannya. Dengan menggunakan Transit, saya dapat "memindahkan" file dari satu bucket S3 di satu akun AWS ke bucket S3 lain di akun AWS lain, tetapi yang sebenarnya dilakukannya adalah mengunduh file dari yang pertama lalu mengunggahnya ke yang kedua. Apakah ada …

90 file  amazon-s3  amazon-web-services  transfer 

Saya ingin menyalin beberapa file dari keranjang produksi ke keranjang pengembangan setiap hari. Misalnya: Salin keranjang produksi / feed / feedname / tanggal ke developmentbucket / feed / feedname / date Karena file yang saya inginkan berada sangat dalam di struktur folder, memakan waktu terlalu lama untuk membuka setiap folder …

90 amazon-s3 

Tutup. Pertanyaan ini tidak memenuhi pedoman Stack Overflow . Saat ini tidak menerima jawaban. Ingin memperbaiki pertanyaan ini? Perbarui pertanyaan agar sesuai dengan topik Stack Overflow. Tutup 1 tahun lalu . Perbaiki pertanyaan ini Saya ingin menghosting situs web statis khusus HTTPS menggunakan Amazon S3 dan CloudFront. Inilah yang telah …

90 ssl  https  amazon-s3  amazon-cloudfront 

Dalam proyek Node.js saya mencoba mendapatkan kembali data dari S3. Saat saya menggunakan getSignedURL, semuanya bekerja: aws.getSignedUrl('getObject', params, function(err, url){ console.log(url); }); Parameter saya adalah: var params = { Bucket: "test-aws-imagery", Key: "TILES/Level4/A3_B3_C2/A5_B67_C59_Tiles.par" Jika saya mengambil output URL ke konsol dan menempelkannya di browser web, itu mengunduh file yang saya …

90 javascript  node.js  amazon-s3  aws-sdk  aws-sdk-nodejs 

AWS memiliki beberapa lokasi untuk penyimpanan dan instans EC2 untuk dijalankan dengan harga yang berbeda. Bagaimana saya bisa menentukan lokasi mana yang terbaik untuk wilayah tertentu. Apakah intuitif (lebih dekat ke wilayah layanan Anda adalah yang terbaik) atau adakah masalah keandalan (lokasi AWS tertentu menghadapi lebih banyak pemadaman daripada yang …

90 amazon-s3  amazon-ec2  amazon-web-services 

Saya memiliki struktur folder berikut di S3. Apakah ada cara untuk menghapus semua file secara rekursif di bawah folder tertentu (katakanlah foo/bar1 or foo or foo/bar2/1..) foo/bar1/1/.. foo/bar1/2/.. foo/bar1/3/.. foo/bar2/1/.. foo/bar2/2/.. foo/bar2/3/..

90 amazon-s3  amazon-web-services 

Apakah ada yang tahu bagaimana melakukan ini? Sejauh ini saya belum dapat menemukan sesuatu yang berguna melalui Google. Saya benar-benar ingin menyiapkan repo lokal dan menggunakannya git pushuntuk menerbitkannya ke S3, idenya adalah untuk memiliki kontrol versi lokal atas aset tetapi penyimpanan jarak jauh di S3. Bisakah ini dilakukan, dan …

89 git  amazon-s3 

Saya ingin memeriksa apakah ada kunci dalam bucket tertentu menggunakan Java. Saya melihat API tetapi tidak ada metode yang berguna. Saya mencoba menggunakan getObjecttetapi itu membuat pengecualian.

88 java  amazon-web-services  amazon-s3  aws-sdk 

Jika saya memiliki sejuta gambar, apakah lebih baik menyimpannya di beberapa hierarki folder / sub-folder atau hanya membuang semuanya langsung ke dalam ember (tanpa folder apa pun)? Apakah membuang semua gambar ke dalam keranjang tanpa hierarki akan memperlambat operasi LIST? Apakah ada overhead yang signifikan dalam membuat folder dan sub …

87 performance  file  amazon-s3  limit  directory 

Saya membuat folder di s3 bernama "test" dan saya mendorong "test_1.jpg", "test_2.jpg" ke dalam "test". Bagaimana cara menggunakan boto untuk menghapus folder "test"?

87 python  amazon-s3  boto