獲得文件權限問題,即使我有權利附加我的角色

[User16869510359]

我從S3磚集群和讀取數據讀操作403權限錯誤很少失敗。重新啟動集群解決我的問題。

[User16869510359 · Accepted solution]

這種行為的主要原因是:

• 使用AWS鍵除了我的角色。使用全球init腳本設置AWS鍵會導致這種行為。
• 我角色所需的權限訪問S3數據,但火花AWS鍵設置配置。例如,設置spark.hadoop.fs.s3a.secret。關鍵的可以與我衝突的作用。
• 設置AWS鍵在環境層麵上的司機節點從一個交互式集群通過一個筆記本。