為您的 Microsoft Fabric 環境升級 Python 版本

DDD
發布: 2024-09-13 06:30:32
原創
689 人瀏覽過

我最近嘗試使用 Azure 事件中心套件在 Fabric 中重新執行 python 筆記本以將資料上傳到 KQL 資料庫。原本順利運行了幾個月的腳本,在環境改變或更新後突然停止工作。

在我的筆記本中安裝該軟體包時,我遇到的第一個問題是以下問題。

ERROR: pip's dependency resolver does not currently take into account all the packages that are installed
登入後複製

此錯誤表示套件依賴衝突,通常是由於Python環境版本不相容或依賴關係未對齊而導致。

Upgrading Python version for your Microsoft Fabric environment

當嘗試導入包時,我可以看到環境設定為 3.10(見下文)。
當嘗試建立自己的環境時,我也找不到 azure-eventhub pypi 套件(請參閱此處)。

Upgrading Python version for your Microsoft Fabric environment

Upgrading Python version for your Microsoft Fabric environment

最終,我嘗試弄清楚如何升級python環境,在朋友的幫助下,我成功了。

Upgrading Python version for your Microsoft Fabric environment

解決方案是升級PySpark環境。
它透過將 Python 運行時更新為與 azure-eventhub 套件相容的版本解決了該問題。切換到 Spark Runtime 1.3 將 Python 更新到版本 3.11.x,解決了依賴衝突。

如何將 Spark 運行時變更為 1.3

  1. 前往工作區設定。
    Upgrading Python version for your Microsoft Fabric environment

  2. 從下拉清單中選擇適當的運行時。
    Upgrading Python version for your Microsoft Fabric environment

  3. 儲存並重新啟動筆記本。

環境升級驗證

現在更改已套用,建立一個新筆記本,確保所選環境使用 Spark Runtime 1.3。

# Check if the environment upgrade was successful
import azure.eventhub
print("Environment setup successful!")

登入後複製

結論

透過更改 Spark 運行時升級 Fabric 中的 Python 環境解決了我遇到的 azure-eventhub 套件的依賴衝突。如果您遇到類似問題,調整運行時版本可以快速解決。請記住驗證您的更改並測試您的腳本以確保一切順利運行。

注意:我後來在一些訓練教材中找到了關於我的問題的註釋,這是我第一個沒有 --force 參數的解決方案。如果您需要保持 Spark 運行時不變,這可能是更好的解決方案 https://github.com/microsoft/FabricRTA-in-a-Day/blob/main/Lab3.md#steps

參考文獻:

  • https://learn.microsoft.com/en-us/fabric/data-engineering/runtime
  • https://pypi.org/project/azure-eventhub/
  • https://github.com/Azure/azure-sdk-for-python/blob/main/sdk/eventhub/azure-eventhub/azure/eventhub/_ Producer_client.py

以上是為您的 Microsoft Fabric 環境升級 Python 版本的詳細內容。更多資訊請關注PHP中文網其他相關文章!

來源:dev.to
本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn
熱門教學
更多>
最新下載
更多>
網站特效
網站源碼
網站素材
前端模板
關於我們 免責聲明 Sitemap
PHP中文網:公益線上PHP培訓,幫助PHP學習者快速成長!