為什麼spark.read。csv帶回來一個錯誤:com.databricks.sql.io。文件ReadException: Error while reading file dbfs:/mnt/cntnr/demo/circuits.csv ?

[jch]

我需要幫助理解為什麼我不能打開一個文件。

磚的筆記本,我用這段代碼:

% fs ls / mnt / cntnr /演示

我回來dbfs: / mnt / cntnr /演示/ circuits.csv作為一個路徑值。

當我使用這段代碼中,我得到一個錯誤:

circuits_df = spark.read.csv (“dbfs: / mnt / cntnr /演示/ circuits.csv”)

有什麼建議嗎?

任何的建議

[daniel_sahal]

@jch

spark.read試試。csv沒有dbfs:

你可以在這裏了解更多:

https://docs.m.eheci.com/files/index.html

[jch]

這並沒有奏效

circuits_df = spark.read.csv (“/ mnt / cntnr /演示/ circuits.csv”)

[Shivanshu_Tiwar · Accepted solution]

試試這個

circuits_df = spark.read.csv (“/ dbfs / mnt / cntnr /演示/ circuits.csv”)

[jch]

原來我的火花配置是錯誤的

#設置火花配置

款= {" fs.azure.account.auth。類型”:“OAuth”,

“fs.azure.account.oauth.provider。類型”:“org.apache.hadoop.fs.azurebfs.oauth2.ClientCredsTokenProvider”,

“fs.azure.account.oauth2.client。id”: client_ID,

“fs.azure.account.oauth2.client。秘密”:client_secret,

“fs.azure.account.oauth2.client。端點”:f“https://login.microsoftonline.com/ {tenant_ID} / oauth2 /令牌”}