考量和限制 - Amazon Athena
Apache Spark 3.5 版Pyspark 引擎版本 3

本文為英文版的機器翻譯版本，如內容有任何歧義或不一致之處，概以英文版為準。

考量和限制

Apache Spark 3.5 版

以下是發行版本 Apache Spark 3.5 版的考量和限制：

  • 此發行版本可在下列位置取得AWS 區域：

    • 亞太地區 (孟買)

    • 亞太地區 (新加坡)

    • 亞太地區 (雪梨)

    • 亞太地區 (東京)

    • 歐洲 (法蘭克福)

    • 歐洲 (愛爾蘭)

    • 美國東部 (維吉尼亞北部)

    • 美國東部 (俄亥俄)

    • 美國西部 (奧勒岡)

  • 此引擎版本不支援 Athena 主控台內筆記本或筆記本 APIs。相反地，此版本與 Amazon SageMaker AI Unified Studio 筆記本整合。您也可以使用相容的 Spark Connect 用戶端。

  • 此版本GetCalculationExecution不支援計算 APIs - StartCalculationExecutionListCalculationExecutions和 。

  • 您無法將工作群組從 PySpark 引擎版本 3 升級至 Apache Spark 版本 3.5。

Pyspark 引擎版本 3

以下是發行版本 Pyspark 引擎第 3 版的考量和限制：

  • 此發行版本可在下列位置取得AWS 區域：

    • 亞太地區 (孟買)

    • 亞太地區 (新加坡)

    • 亞太地區 (雪梨)

    • 亞太地區 (東京)

    • 歐洲 (法蘭克福)

    • 歐洲 (愛爾蘭)

    • 美國東部 (維吉尼亞北部)

    • 美國東部 (俄亥俄)

    • 美國西部 (奧勒岡)

  • AWS Lake Formation不支援 。

  • 不支援使用分割區投影的資料表。

  • 已啟用 Apache Spark 的工作群組可以使用 Athena 筆記本編輯器，但無法使用 Athena 查詢編輯器。只有 Athena SQL 工作群組可以使用 Athena 查詢編輯器。

  • 不支援跨引擎檢視查詢。Athena for Spark 無法查詢 Athena SQL 建立的檢視。由於兩個引擎的檢視以不同的方式進行實作，因此他們與跨引擎使用不相容。

  • 不支援 MLlib (Apache Spark 機器學習程式庫) 和 pyspark.ml 套件。如需支援的 Python 程式庫清單，請參閱 預先安裝的 Python 程式庫清單。

  • 目前，Athena for Spark 工作階段不支援 pip install。

  • 每個筆記本僅允許一個作用中的工作階段。

  • 當多個使用者使用主控台開啟工作群組中的現有工作階段時，他們會存取同一筆記本。為避免混淆，請僅開啟您自己建立的工作階段。

  • 您可能與 Amazon Athena 搭配使用的 Apache Spark 應用程式的託管域 (例如 analytics-gateway.us-east-1.amazonaws.com)，會在網際網路公用尾碼清單 (PSL) 中註冊。如果您需要在域中設定敏感性 Cookie，我們建議您使用帶有 __Host- 字首的 Cookie，以協助保護您的域免受跨網站請求偽造 (CSRF) 攻擊的影響。如需更多資訊，請參閱 Mozilla.org 開發人員文件中的設定 Cookie 頁面。

  • 如需有關對 Athena 中的 Spark 筆記本、工作階段和工作群組進行疑難排解的詳細資訊，請參閱 對 Athena for Spark 進行疑難排解。