日本无码免费高清在线|成人日本在线观看高清|A级片免费视频操逼欧美|全裸美女搞黄色大片网站|免费成人a片视频|久久无码福利成人激情久久|国产视频一二国产在线v|av女主播在线观看|五月激情影音先锋|亚洲一区天堂av

  • 手機(jī)站
  • 小程序

    汽車測(cè)試網(wǎng)

  • 公眾號(hào)

    • 汽車測(cè)試網(wǎng)

    • 在線課堂

    • 電車測(cè)試

大數(shù)據(jù)時(shí)代ODS數(shù)據(jù)適配器——Peak Spark ODS

2021-12-15 14:27:51·  來源：PeakSolution汽車測(cè)試管理  
　
ODS適配器起源ASAM ODS ~ 廣泛用于長(zhǎng)久存儲(chǔ)測(cè)試數(shù)據(jù)的使用的一個(gè)標(biāo)準(zhǔn)。汽車制造商和供應(yīng)商主要使用它來為不同的測(cè)試系統(tǒng)和數(shù)據(jù)格式設(shè)置全面的數(shù)據(jù)管理解決方案。
ODS適配器起源
ASAM ODS ~ 廣泛用于長(zhǎng)久存儲(chǔ)測(cè)試數(shù)據(jù)的使用的一個(gè)標(biāo)準(zhǔn)。汽車制造商和供應(yīng)商主要使用它來為不同的測(cè)試系統(tǒng)和數(shù)據(jù)格式設(shè)置全面的數(shù)據(jù)管理解決方案。通過這種方式，他們使測(cè)試數(shù)據(jù)長(zhǎng)期可用，而不考慮各個(gè)供應(yīng)商的工具如何。為了從現(xiàn)有測(cè)量中獲得更多信息，Peak Solution開發(fā)了Peak Spark ODS適配器。
該解決方案允許用戶直接訪問ASAM ODS（=外部組件）的海量數(shù)據(jù)。在選擇一組測(cè)試通道后，例如通過Peak Test Data Workplace，他可以對(duì)其執(zhí)行任意復(fù)雜的查詢。該解決方案將查詢結(jié)果作為列表返回給用戶。他可以緩存此列表或?qū)⑵鋵?dǎo)出為csv文件，例如，為了應(yīng)用算法和統(tǒng)計(jì)方法來檢測(cè)模式，關(guān)系和集群。
適配器的實(shí)現(xiàn)基于Apache Spark。這樣就可以高速對(duì)大量數(shù)據(jù)進(jìn)行復(fù)雜的數(shù)據(jù)查詢并分析數(shù)據(jù)。Peak Solution推出了一個(gè)特殊的插件，用于將測(cè)量通道的ODS數(shù)據(jù)結(jié)構(gòu)作為RDD（彈性分布式數(shù)據(jù)集）。除此之外，在這個(gè)應(yīng)用程序創(chuàng)建臨時(shí)數(shù)據(jù)表（=數(shù)據(jù)幀）然后使用上述提到的算法進(jìn)行用戶執(zhí)行。
用戶可以使用基于Web的notebook，如Apache Zeppelin或Jupyter，對(duì)測(cè)量通道進(jìn)行交互式分析。此工具的最大優(yōu)勢(shì)是探索性評(píng)估（=數(shù)據(jù)挖掘）。這允許用戶首先獲得數(shù)據(jù)的概述，然后逐漸接近他的分析目標(biāo)。他可以輕松可視化和共享中間結(jié)果。為此，用戶只需將其notebook作為網(wǎng)頁發(fā)布即可。然后，有權(quán)限的人員可以查看并繼續(xù)使用它。
Peak Spark ODS適配器的一個(gè)重要優(yōu)勢(shì)是它的擴(kuò)展性：Spark和Zeppelin都不需要Hadoop Eco-System系統(tǒng)。因此，公司可以在其現(xiàn)有的ODS基礎(chǔ)架構(gòu)中充分利用其解決方案，而無需進(jìn)行大量的IT投資，在逐漸將其構(gòu)建為強(qiáng)大的大數(shù)據(jù)集群之前，用于管理和分析大量測(cè)試數(shù)據(jù)。Start small, think tall。
分享到：
 
反對(duì) 0 舉報(bào) 0 收藏 0 評(píng)論 0
滬ICP備11026917號(hào)-25