日日操夜夜添-日日操影院-日日草夜夜操-日日干干-精品一区二区三区波多野结衣-精品一区二区三区高清免费不卡

公告:魔扣目錄網為廣大站長提供免費收錄網站服務,提交前請做好本站友鏈:【 網站目錄:http://www.ylptlb.cn 】, 免友鏈快審服務(50元/站),

點擊這里在線咨詢客服
新站提交
  • 網站:51998
  • 待審:31
  • 小程序:12
  • 文章:1030137
  • 會員:747

本文介紹了將Azure Blob分區添加到Azure SQL表的處理方法,對大家解決問題具有一定的參考價值,需要的朋友們下面隨著小編來一起學習吧!

問題描述

我在Azure Blob中對拼圖文件進行了分區,并將其復制到Azure SQL。如何將分區名稱放入SQL表?

我已經知道如何通過在復制活動(圖1和圖2)的源數據部分中添加一個額外的列來將完整的文件路徑放入SQL表中,但我正在嘗試如何將完整的文件路徑向下僅表示為分區名(202105)。

在復制活動中的源數據的數據預覽中,它顯示了僅帶有分區名稱的time_Period列(圖3)。但是,當它在SQL中顯示時,它對于所有行都是空的(或者它是完整的文件路徑,這取決于我是否在復制活動的源數據部分添加了額外的列)。

圖片1:

圖2:

圖3:

我已嘗試在Azure SQL中將Time_Period的數據類型更改為int。我已嘗試分析$$FILEPATH,但均未奏效。

我基本上是從頭開始,因為我相信有更好的辦法。
額外的背景here和可能的here。

類似于this

推薦答案

如here在MS文檔中所述,您可以使用enablePartitionDiscovery功能。

來源:分區文件:

源數據集:

剛才提到了容器名稱,并將目錄和文件字段留空。我們將在復制活動中使用WildCard paths篩選它們。

根據您的文件路徑在Copy Activity中配置源代碼:

注意:您可以跳過步驟4,即添加$$FILEPATH一欄,僅供參考。您可以刪除此位,因為您已經使用enablePartitionDiscovery獲取了Ready列。

對于要拾取的單個文件夾,您需要如下設置。

通配符路徑:sink / columnparts / time_period=202105 / *.parquet

對于多個文件夾time_period=202105time_period=202106…..如前面的SINP所示,設置如下。

**將取代父文件夾中的任何文件夾columnparts

通配符路徑:sink / columnparts / ** / *.parquet

分區根路徑:該路徑應指向所有分區文件夾所在的父文件夾。

在我的示例中:sink/columnparts

啟用分區發現時必須提供分區根路徑。

接收器:可選更新現有表或僅創建新表。

從SQL數據庫查看:time_period列保存值202105

time_period=202105/part-00004-fcbe0bf5-2c93-45f5-9bb2-2f9089a3e83a-c000.snappy.parquet

如果您看到此錯誤:

您的映射未更新!在映射部分中,您可以再次使用clearreset模式和Import schema,以確保這一點。

分享到:
標簽:Azure azure-data-factory azure-sql errorAddAzureBlobPartitionstoAzureSQL
用戶無頭像

網友整理

注冊時間:

網站:5 個   小程序:0 個  文章:12 篇

  • 51998

    網站

  • 12

    小程序

  • 1030137

    文章

  • 747

    會員

趕快注冊賬號,推廣您的網站吧!
最新入駐小程序

數獨大挑戰2018-06-03

數獨一種數學游戲,玩家需要根據9

答題星2018-06-03

您可以通過答題星輕松地創建試卷

全階人生考試2018-06-03

各種考試題,題庫,初中,高中,大學四六

運動步數有氧達人2018-06-03

記錄運動步數,積累氧氣值。還可偷

每日養生app2018-06-03

每日養生,天天健康

體育訓練成績評定2018-06-03

通用課目體育訓練成績評定