2013-01-25 12 views
5

Jak dołączyć tekst do istniejącego lub nowo utworzonego pliku w S3. Używam fog i mam następujący kodRuby - dołącz treść na końcu istniejącego pliku s3 za pomocą mgły

require 'fog' 
file = "abc.csv" 
bucket = 'my_bucket' 
storage = Fog::Storage.new(:provider => 'AWS', :aws_access_key_id => 'XXXXXXXX', :aws_secret_access_key => 'YYYYYYYY') 
dir  = connection.directories.new(:key => bucket) # no harm, if this bucket already exists, if not create one 
buffer = ["big_chunk1", "big_chunk2", "big_chunk3", "big_chunk4", "big_chunk5"] 

# I need help after this line. No changes above. 
buffer.each do |chunk| 
    # this will not work as it will not append text below the existing file or 
    # newly created one. I am not looking for solution suggesting, buffer.join('') 
    # and then write whole chunk at once. I have to write in chuck for some specific reason. 
    # Also I dont want to first read existing data and then take in to memory 
    # and then append and finally write back. 
    dir.files.create(:key => file, :body => chunk, :public => false) 
end 

Odpowiedz

5

Po przesłaniu do S3, plik jest niezmienna - to nie może być zmieniony lub dołączane do.

Jeśli chcesz tylko przesłać plik w kawałkach, możesz skorzystać z funkcji przesyłania wieloczęściowego (zakładając, że masz mniej niż 10000 fragmentów, a wszystkie oprócz ostatniej będą miały co najmniej 5 MB), jednak " Prawdopodobnie będziesz musiał spaść na poziom żądań mgły (zamiast używać modeli mgły, jak obecnie).

+0

Dzięki @Frederick Cheung. Doszłam do tego samego wniosku po tak wielu badaniach. A tak przy okazji, czy wiesz, jak podpisać URL s3 za pomocą mgły? Nie można znaleźć żadnych informacji na ten temat w dokumentacji mgły. – JVK

Powiązane problemy