本月DataWorks產品月刊為您帶來
產品活動:
1.限時折扣!DataWorks專業版原價5000元現僅需199元;獨享數據集成資源組首月5折
產品功能更新:
1.新增DataWorks首頁,幫助新用戶快速瞭解DataWorks的產品定位及使用場景,降低學習成本
2.資源優化模塊正式商業化,專業版以上可用
3.數據地圖支持MySQL、Hologres、ADB等多種數據類型元數據採集
4.獨享資源組支持自定義路由功能
5.數據集成6月新功能:
- 數據源資源組連通性測試、新增hive數據源同步、hive整庫遷移
- 新增PolarDB、OceanBase、SQL Server的實時讀取;新增MaxCompute、Hologres的實時寫入
- MySQL支持了分庫分表實時同步,實時同步可以針對於單庫和單表進行按場景選擇設置
- 增加同步解決方案模塊,一鍵整庫Hologres,資源組推薦功能
DataWorks百問百答32-41更新
【產品活動】
1. 限時折扣!DataWorks專業版原價5000元現僅需199元>>
立即前往>>
2. 限時折扣!獨享數據集成/獨享調度資源組首月5折>>
立即前往>>
【產品功能更新】
1、DataWorks產品首頁發佈:
新增DataWorks首頁,幫助新用戶快速瞭解DataWorks的產品定位及使用場景,降低學習成本。
2、資源優化模塊結束內測,正式商業化
資源優化功能已開啟商用,僅限專業版或以上dataworks版本可用。本功能可以從計算、存儲方面掃描發現資源浪費的問題,並提供解決方案,降低客戶大數據平臺的使用成本。
- 數據存儲:可掃描出未管理的表、空表及90為訪問表
- 數據計算:可掃描出存在的任務衝突、數據傾斜及暴力掃描情況
- 數據採集:可掃描出導入為空、持續導入一致及同源導入的情況
3、數據地圖支持MySQL、Hologres、ADB等多種數據類型元數據採集和管理
在數據地圖中,數據發現新增對Hologres、ADB、MySQL、Oracle等多種數據類型的元數據採集能力,以及與之配套的全局檢索和詳情查看能力。詳見:https://help.aliyun.com/document_detail/163501.html
- 元數據採集:
- 數據目錄和全局檢索:
- 表元數據詳情查看:
4、獨享資源組支持自定義路由功能
獨享資源組新增添加自定義路由功能,支持按需添加資源組VPC和其它VPC、IDC之間的自定義路由,可解決數據同步等場景下網絡不可通的痛點問題。詳見:https://help.aliyun.com/document_detail/168984.html
-
資源組加路由
- 通過界面化的產品,使用戶自己手工添加打通網絡所需路由,大大提升了網絡設置效率
5、數據集成6月新功能介紹
-
數據源資源組連通性測試
- 可以按照資源組進行單個測試連通性
- 支持調度任務和數據服務使用數據源的連通性測試,以保證功能的正常執行
-
Hive數據源
- 新增hive數據源同步,並支持JDBC模式,實現數據過濾和SQL查詢
- hive整庫遷移:方便用戶的hive系統數據搬站上雲。
-
實時同步
- 新增PolarDB、OceanBase、SQL Server的實時讀取
- 新增MaxCompute、Hologres的實時寫入
-
MySQL支持了分庫分表實時同步,可以實現多庫多表同時實時同步
-
增加同步解決方案模塊
- 針對某些同步場景流程有了產品級入口,可以場景式解決用戶問題,一站式完成所有操作。具體可以參見使用說明
-
一鍵整庫Hologres
- 在“同步解決方案”裡增加了一鍵整庫同步至Hologres,可以把某些數據庫裡的表通過簡單配置,一次性的全量然後自動實時增量的同步至Hologres中,並支持動態DDL變化。
- 針對某些同步場景流程有了產品級入口,可以場景式解決用戶問題,一站式完成所有操作。具體可以參見使用說明
-
實時同步實現多種形式
- 實時同步可以針對於單庫和單表進行按場景選擇設置
-
資源組推薦
- 將複雜的資源組選擇和網絡配置方案直觀的展示給用戶,並引導和介紹用戶使用方式和場景
【DataWorks百問百答更新】
DataWorks百問百答33:數據同步怎麼配置ODPS分區?
DataWorks百問百答34:mongoDB同步odps實踐時如何使用時間戳篩選數據?
DataWorks百問百答35:有哪些odps spark的主python樣例?
DataWorks百問百答36:如何在DataWorks中使用組件(SQL存儲過程)實現代碼複用?
DataWorks百問百答37:DataWorks-MaxCompute權限體系有哪些混淆點?
DataWorks百問百答38:有哪些阿里雲vpc環境數據源與數據集成獨享資源組網絡打通案例?
DataWorks百問百答39:VPC網絡下adb pg實例引擎如何綁定dataworks工作空間執行任務?
DataWorks百問百答40:本地自定義函數UDF如何在DataWorks上使用?
DataWorks百問百答41:DataWorks上如何保護敏感數據?
【產品文檔更新】
新增創建EMR Presto節點功能
新增自定義調度資源組
新增管理白名單功能
新增查看和設置報警資源功能
新增同步解決方案功能
新增採集hologres元數據功能
【往期系列】
DataWorks 2020-05 產品月刊
DataWorks 2020-04 產品月刊
DataWorks 2020-03 產品月刊
DataWorks 2020-02 產品月刊
DataWorks 2020-01 產品月刊
DataWorks 2019-12 產品月刊
更多DataWorks技術和產品信息,歡迎加入【DataWorks釘釘交流群】,為您提供最新的產品直播、產品活動及技術支持點擊查看