问题描述
pyathena
或boto3
中哪个更快使用python脚本查询AWS Athena模式?
目前,我正在使用pyathena查询Athena模式,但速度很慢,我知道boto3还有另一种选择,但在开始之前需要专家咨询。
解决方法
查看dependencies for PyAthena,您会发现它实际上具有boto3的依赖性。
除非PyAthena为其库增加了很多开销(这不太可能),否则您可能会看到的最佳性能改进将取决于您如何使用Athena本身。
您可以进行许多性能改进,亚马逊发布了一个名为Top 10 Performance Tuning Tips for Amazon Athena的博客,这将有助于改善查询的性能。