腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
搜索
关闭
文章
问答
(71)
视频
开发者手册
清单
用户
专栏
沙龙
全部问答
原创问答
Stack Exchange问答
更多筛选
回答情况:
全部
有回答
回答已采纳
提问时间:
不限
一周内
一月内
三月内
一年内
问题标签:
未找到与 相关的标签
筛选
重置
3
回答
如何在Glue作业中使用
Awswrangler
?
出于某些原因,我想在Python3Glue作业中使用python包
awswrangler
。我考虑过安装
awswrangler
的两种主要方法 os.system('python -m pip install --user
awswrangler
==0.0.b0') 请注意,在最后一种情况下,我甚至使用了
awswrangler
的第一个预发布版本。但是,即使有了第一
浏览 5
提问于2020-08-29
得票数 3
回答已采纳
1
回答
模拟
AWSwrangler
进行单元测试
由于moto不支持
AWSwrangler
,所以我被困在这里,不知道如何模仿。import boto3 def athena_query(dbtable, contact_id, athena_output, session):
浏览 0
修改于2021-11-30
得票数 3
1
回答
使用
awswrangler
连接到AWS红移
import
awswrangler
as wr"MY_GLUE_CONNECTION“的价值是什么?
浏览 4
修改于2022-01-30
得票数 1
回答已采纳
3
回答
导入
awswrangler
时出错: AttributeError:模块“”multiprocessing“”没有属性“”connection“”
我有一个使用lib
awswrangler
的python脚本。今天我的scrpit开始在导入库的时候给出错误,我不知道发生了什么。我在docker容器中使用image python: 3.8运行脚本 示例: import
awswrangler
as wr File "/usr/local/lib/python3.8/site-packages/
awswrangler
/__init__.py", li
浏览 40
提问于2020-03-29
得票数 1
回答已采纳
1
回答
赛格梅克
AWSWrangler
>2.3.0
运行时,在笔记本中直接安装
awswrangler
>=2.3.0时,提供的错误如下 '/home/ec2-user/anaconda3/envs/python3/lib/python3.6/site-packages
浏览 2
修改于2022-01-30
得票数 0
1
回答
awswrangler
:尝试读取表时无法启动新线程
当我尝试使用
awswrangler
.read_parquet函数访问它时,我得到一个错误,说我不能访问这个文件,因为我不能创建新的线程。_load_args) File "/home/ec2
浏览 69
修改于2022-01-30
得票数 0
1
回答
使用
AwsWrangler
的自定义拼花模式
我正在创建和上传拼花文件到AWS S3使用
awswrangler
。问题在于它自动生成模式,而且由于某些字段可以以不同的格式(有时是字符串,有时是数字)出现,所以在试图读取文件时会遇到问题。从
awswrangler
文档中,我看到可以将dtype作为参数传递。但上面说这是给雅典娜/格鲁的。
浏览 10
提问于2022-02-22
得票数 0
1
回答
不同类型的
awswrangler
返回数据
我使用
awswrangler
来转换一个简单的dataframe,把它推到s3桶上,然后再读一遍。这是代码:import
awswrangler
as wrtest_bucket = 'test-bucket' test_data
浏览 6
修改于2021-05-19
得票数 0
1
回答
使用
awswrangler
向S3对象添加标记?
我使用在我的S3中编写parquets,并且我通常在我的所有对象上添加标记来访问和控制成本,但是我没有找到一种直接使用
awswrangler
的方法。我正在使用下面的代码来测试:import boto3session = boto3
浏览 1
修改于2022-01-30
得票数 1
回答已采纳
1
回答
AWS Lambda -
AwsWrangler
- Pandas/Pytz -无法导入所需的依赖项:pytz:
为了克服Numpy错误,我从https://github.com/awslabs/aws-data-wrangler/releases下载了这个压缩包
awswrangler
-layer-1.9.6-py3.8我在AWS上使用Python 3.8,因为它是wranger的更高版本:
awswrangler
-layer-1.9.6-py3.8。 我的第一次尝试只包含了Pandas和Numpy模块。第三次尝试时,我包含了
awswrangler
-layer-1.9.6-py3.8/pyth
浏览 44
修改于2020-10-27
得票数 1
回答已采纳
1
回答
Visual Studio不显示来自
awswrangler
的DataFrame弹出帮助
import boto3import pandas as pd df2 = wr.athena.read_sql_query
浏览 30
修改于2022-01-30
得票数 0
1
回答
当使用
awswrangler
连接到Redshift时,Redshift集群必须公开访问吗?
我在与Redshift集群相同的AWS帐户中的lambda上运行
awswrangler
.redshift.connect_temp。redshift_import_lambda.py", line 12, in handler File "/opt/python/
awswrangler
红移集群必须是公共的才能让
awswrangler
连接吗? 在使
AWSWrangler
连接正常工作时,是否有一种方法将集
浏览 0
提问于2022-07-29
得票数 0
2
回答
awswrangler
和boto3的区别是什么?
最近,我偶然发现了
awswrangler
库,它的功能与boto3类似。你用例子解释的both.Can有什么区别,比如我们应该在哪种场景中使用哪种场景?
浏览 0
提问于2021-05-18
得票数 0
1
回答
awswrangler
将拼接数据帧写入单个文件
我正在创建一个不能直接放入内存的非常大的文件。因此,我在S3中创建了一堆小文件,并且正在编写一个脚本,可以读取这些文件并合并它们。我正在使用aws wrangler来完成此操作 我的代码如下: try: for df in dfs: path = wr.s3.to_parquet(df=df, dataset=T
浏览 11
修改于2022-01-30
得票数 0
1
回答
在conda环境中安装最新版本的
awswrangler
时遇到问题
出于某种原因,当我最初通过conda install -c conda-forge
awswrangler
安装它时,它安装了0.3.1版。当我尝试运行时:它有解决环境问题的能力。
浏览 9
提问于2021-03-10
得票数 0
1
回答
awswrangler
.s3.read_parquet忽略partition_filter参数
下面是一个可重复的示例(可能需要正确配置的boto3_session参数):import pandas as pdimport boto3
浏览 9
修改于2022-01-30
得票数 2
回答已采纳
2
回答
Lambda +
awswrangler
:处理“大型”拼花文件时性能不佳
这样做的目的是读取文件并将它们转换为csv:from io import StringIO s3
浏览 11
提问于2022-06-14
得票数 1
回答已采纳
1
回答
如何在Python3中从
awswrangler
中捕获exceptions.NoFilesFound错误
import boto3 ---> 13 df = wr.s3.read_parquet(path=file_prefix) /usr/local/lib/python3.9/site-packages/
awswrangler
看起来它来自
awswr
浏览 13
提问于2021-04-22
得票数 0
回答已采纳
1
回答
无法在conda python 3.8 env上正确安装
awswrangler
(连接问题)
以下是我到目前为止一直遵循的流程。<code>A0</code><code>A2</code><code>A3</code>
浏览 47
提问于2021-03-15
得票数 0
1
回答
如何使用
awswrangler
只读取存储在S3中的拼花文件的前几行N行?
我试图使用
awswrangler
将存储在S3中的任意大小的拼花文件读入熊猫的数据中,但由于文件的大小(以及我的带宽不足),我的查询限制在第一个N行。
浏览 15
提问于2022-05-25
得票数 2
回答已采纳
第 2 页
第 3 页
第 4 页
点击加载更多
领券