使用知識圖的語義數據層數據磚

知識圖已成為無處不在的,我們隻是不知道。我們經曆每一天當我們在穀歌上搜索或觀察運行的提要通過社交媒體賬戶的人我們知道,我們遵循公司或者我們喜歡的內容。同樣,企業知識圖提供了一個基礎結構組織的內容,通過提取數據和信息資產,和交付相關知識回答,建議和見解從聊天機器人每個數據驅動應用程序推薦引擎或增壓BI和分析。

在這個博客中,您將學習如何在民主化磚和Stardog解決最後一英裏的挑戰數據和見解。磚提供了一個lakehouseBeplay体育安卓版本平台數據,分析和人工智能(AI)多重雲平台上的工作負載。Stardog知識提供了一個圖形平台,可以對廣泛的數據模型複雜的關係,Beplay体育安卓版本而不僅僅是大,來形容人,地方,事情,以及它們是如何聯係的。的磚Lakehouse平台Beplay体育安卓版本,加上Stardog的知識Graph-enabled語義層,為組織提供一個企業的基礎數據結構架構,使跨職能、跨企業、跨組織團隊跨域豎井詢問和回答複雜的查詢。

越來越需要一個數據結構架構

快速創新和中斷的數據從數據管理領域正在幫助組織釋放價值內外的企業。組織操作在物理和數字邊界正在尋找新的機會為顧客他們想要的方式。beplay体育app下载地址

這些組織供應鏈連接所有相關數據在數據來創建一個完整、準確的上下文中圖片他們的用例。大多數行業看起來操作和共享數據跨組織邊界協調數據,使數據共享是采用開放標準規定的形式本體,調用FIBO在金融服務D3FEND在網絡安全領域。這些業務本體(或語義模型)反映了我們如何看待數據附加意義,即。“東西”,而不是如何結構化和數據存儲,即。“弦”,使數據共享和重用成為可能。

語義層的想法並不新鮮。它已經存在了30多年,經常由BI廠商幫助公司建立專門的儀表板。然而,廣泛采用已經阻礙了,考慮到嵌入式的本質這一層作為專有BI係統的一部分。這一層通常是太死板和複雜,遭受同樣的限製作為一個物理關係數據庫係統模型數據來優化其結構化查詢語言,而不是數據如何在現實world-many-to-many有關。知識graph-powered語義存儲之間的數據層,經營和消費層次提供膠水和乘數,連接所有數據上下文中提供價值的業務用例的科學家和公民數據分析師,否則無法參與和協作以數據為中心的體係結構之外的少數專家。

使一個用例在保險

讓我們看一個實際的例子來說明基於保險組織Stardog和磚一起工作。最喜歡大公司,許多保險公司類似的挑戰時數據,如缺乏廣泛的來自內部和外部來源的數據可用性決策的關鍵利益相關者。每個人從承保風險評估策略管理索賠管理和機構與利用正確的數據和觀點鬥爭做出重要的決定。他們都需要一個企業範圍內的數據結構,將現代的元素數據和分析架構,使數據公平,可發現的訪問,可互操作和可重用。大多數公司開始他們的旅程將所有數據源到數據。磚lakehouse的方法為企業提供了一個偉大的存儲的基礎可以訪問所有數據分析數據和企業內部的任何人。在這個數據層中,所有清洗、轉換和消歧。下一步是數據協調的旅程中,連接數據根據其意義提供豐富的上下文。語義層,由知識圖,重點轉移到數據分析和處理提供了一個連接的跨域承銷商的見解,風險分析師、經紀人和客戶服務團隊來管理風險,提供非凡的客戶體驗。

我們將研究如何利用它的一個簡化的語義模型作為起點。

容易模型特定於域的實體和跨域的關係

直觀地創建一個語義數據模型通過whiteboard-like經驗是創建語義數據層的初始步驟。在Stardog設計師項目,點擊創建特定的類(或實體)回答您的業務問題的關鍵。一旦創建一個類,您就可以添加所有必需的屬性和數據類型來描述這個新實體。鏈接類(或實體)是很容易的。與一個實體被選中,點擊添加一個鏈接並拖動的新關係,直到拍攝其他實體。給這個新名稱,描述業務含義的關係(例如,一個“客戶”“擁有”一個“汽車”)。

添加一個新的類和鏈接到現有的類來創建一個關係

映射元數據從磚Lakehouse平台Beplay体育安卓版本

沒有數據模型是什麼?Stardog用戶可以連接到各種結構化、半結構化和非結構化數據持久化或虛擬化數據源,或者某種組合,何時何地它是有意義的。在設計師中,很容易連接從現有數據源的數據三角洲湖連接指定的元數據表。這使得初始訪問數據通過虛擬化層移動或複製到不知情的圖。虛擬化層自動翻譯傳入從Stardog從基於開放標準的SPARQL查詢優化下推磚SQL SQL查詢。

添加一個新的數據源作為一個項目的資源

單擊以添加一個新的項目資源和選擇從一個可用的連接,如磚。此連接使用新的SQL端點最近發布的數據磚。定義一個數據範圍,指定任何附加屬性。使用預覽窗格之前迅速看一眼數據添加到您的項目。

包含額外的數據從不同的位置

設計師使它簡單的將從其他數據源的數據和文件,如華禾投資團隊尋求行為特別的數據分析,結合數據從三角洲這一新的信息。一旦添加資源,您隻需添加一個鏈接,拖拽到一個類映射數據。映射一個有意義的名稱,指定一個數據列的主標識符,標簽,和任何其他數據列的屬性相匹配的實體。

項目資源的數據映射到一個類

發布你的作品

在設計師可以直接發布這個項目的模型和數據在Stardog Stardog服務器使用資源管理器。設計師還允許您發布和消費知識的輸出圖以不同的方式。你可以直接發布到一個壓縮文件夾的文件,包括您的模型和映射,您的版本控製係統。

直接發布到Stardog數據庫

一旦Stardog已經發表的數據,數據分析師還可以使用流行的連接通過Stardog BI工具如表BI / SQL端點將數據通過語義層報告或指示板。自動生成的模式在任何SQL-compatible工具允許用戶編寫SQL查詢知識圖。查詢通過SQL層會自動翻譯SPARQL,知識圖的查詢語言,使用自動生成的源優化查詢,通過虛擬層,計算的來源,在這種情況下,通過磚磚SQL端點。相同的信息也可以用於磚用戶筆記本使用Stardog python API,pystardog。你也可以嵌入虛擬圖直接使用Stardog在你的應用程序的使用GraphQL API。語義層的頂部lakehouse為所有類型的用戶提供單獨的環境和他們的首選工具,保持操作由一組一致的數據。

探索通過Stardog Explorer連接數據的應用程序

連接知識圖的數據可視化場景通過Stardog BI-SQL端點

數據科學筆記本磚使用pystardog查詢知識圖的數據

提高生產力和發展新的見解

通過組織知識圖表中的數據,數據團隊提高效率減少他們花的時間爭論從外部來源的數據在臨時數據分析的支持。數據外磚可以通過Stardog聯邦磚內的虛擬化層和連接到數據。此外,實體之間的新關係可以推斷沒有顯式地建模成圖的知識使用統計技術和/或邏輯推理。因為磚和Stardog無縫地協同工作,提供了一個真正的端到端體驗,簡化了複雜的跨域的查詢和分析。此外,語義層變成了生活,共享和易於使用的層作為企業數據結構基礎的一部分,提供企業範圍的知識,以支持數據驅動的新舉措。

開始使用磚和Stardog

在這個博客中,我們提供了一個高層次的概述如何Stardog使知識graph-powered語義數據層的磚Lakehouse平台。Beplay体育安卓版本深入介紹,看看我們深潛水演示。Stardog為知識工作者提供了關鍵及時洞察宇宙連接的數據資產,對它們的分析,加快數據湖投資的價值。通過使用磚和Stardog一起,數據和分析團隊可以迅速建立一個數據結構,組織發展與日益增長的需求。

開始使用磚和Stardog,請求免費試用以下:
//m.eheci.com/try-databricks
https://cloud.stardog.com/get-started
https://www.stardog.com/learn-stardog/