将CSV写入Google云存储
问题描述
我想了解如何将多行CSV文件写入Google云存储。我只是没有理解documentation
靠近此处: Unable to read csv file uploaded on google cloud storage bucket
示例:
from google.cloud import storage
from oauth2client.client import GoogleCredentials
import os
os.environ['GOOGLE_APPLICATION_CREDENTIALS'] = "<pathtomycredentials>"
a=[1,2,3]
b=['a','b','c']
storage_client = storage.Client()
bucket = storage_client.get_bucket("<mybucketname>")
blob=bucket.blob("Hummingbirds/trainingdata.csv")
for eachrow in range(3):
blob.upload_from_string(str(a[eachrow]) + "," + str(b[eachrow]))
这会让您在Google云存储上获得一行
3,c
显然,它每次都打开一个新文件并写入该行。
好的,添加一个新行delim怎么样?
for eachrow in range(3):
blob.upload_from_string(str(a[eachrow]) + "," + str(b[eachrow]) + "
")
这将添加换行符,但再次从头开始写入。
谁能说明一下这种方法是什么?我可以将所有行合并到一个字符串中,也可以编写一个临时文件,但这似乎非常难看。
可能是以文件形式打开?
解决方案
blob.upload_from_string(data)
方法创建一个新对象,其内容正好是字符串data
的内容。它覆盖现有对象,而不是追加。
最简单的解决方案是将整个CSV写入临时文件,然后使用blob.upload_from_filename(filename)
函数将该文件上载到GCS。
相关文章