我已阅读可用的答案here和here,这些都没有帮助。使用boto和熊猫阅读aws s3的csv文件
我试图从S3
存储区读取csv
对象,并且已经能够使用以下代码成功读取数据。
srcFileName="gossips.csv"
def on_session_started():
print("Starting new session.")
conn = S3Connection()
my_bucket = conn.get_bucket("randomdatagossip", validate=False)
print("Bucket Identified")
print(my_bucket)
key = Key(my_bucket,srcFileName)
key.open()
print(key.read())
conn.close()
on_session_started()
但是,如果我尝试读取使用熊猫作为数据框的同一对象,则会出现错误。最常见的是S3ResponseError: 403 Forbidden
def on_session_started2():
print("Starting Second new session.")
conn = S3Connection()
my_bucket = conn.get_bucket("randomdatagossip", validate=False)
# url = "https://s3.amazonaws.com/randomdatagossip/gossips.csv"
# urllib2.urlopen(url)
for line in smart_open.smart_open('s3://my_bucket/gossips.csv'):
print line
# data = pd.read_csv(url)
# print(data)
on_session_started2()
我在做什么错?我在python 2.7上,不能使用Python 3.
不要在不知道自己在做什么的情况下使用那些过时的示例。去看看boto3 – mootmoot