日本网址在线观看-国内精品伊人久久久影院-一区二区三区高清-狠狠久久综合婷婷不卡

熱門(mén)搜索: 無(wú)人機 3D打印 機器人

客服電話(huà): 400-999-3607

靈蜂數據集成軟件

描述:集數據抽取、清洗、轉換及裝載于一體

市場(chǎng)價(jià)格:
0.00
促銷(xiāo)價(jià)格:
詢(xún)價(jià)

服務(wù):由 北京靈蜂縱橫軟件有限公司 從 北京市市轄區海淀區 發(fā)貨,并提供售后服務(wù)

更新時(shí)間:2018-06-29 15:01:13

支付方式:

溫馨提示:7天內無(wú)理由退貨(需不影響二次銷(xiāo)售)

聯(lián)系人:宣向陽(yáng)

電話(huà):010-82176643

在線(xiàn)客服:

所在地區:北京市市轄區海淀區

認證:

熱賣(mài)商品
  • 商品詳情
  • 商品咨詢(xún)

靈蜂數據集成軟件BeeDI


  由北京靈蜂縱橫軟件有限公司研發(fā)的數據集成軟件BeeDI, 集數據抽取、清洗、轉換及裝載于一體,通過(guò)標準化企業(yè)各個(gè)業(yè)務(wù)系統產(chǎn)生的數據,向數據倉庫或Hadoop分析平臺提供高質(zhì)量的數據,從而為企業(yè)高層基于數據倉庫的正確決策分析提供了有力的保證。軟件提供跨庫數據聯(lián)邦 、基于數據庫日志的數據同步、ETL任務(wù)災備及負載均衡等功能,支持同一數據流向多個(gè)接口的分發(fā),同時(shí)也支持多個(gè)數據流的合并,是一款完全面向數據倉庫或Hadoop分析平臺的數據集成產(chǎn)品。

  BeeDI包含2個(gè)發(fā)行版本,分別為BeeDI SE V8.0和BeeDI EE V8.0。
  BeeDI SE即BeeDI標準版,單機程序架構,任務(wù)的設計、運行及監控集成在一個(gè)模塊內部。
  BeeDI EE即BeeDI企業(yè)版,基于C/S架構,客戶(hù)端軟件(BeeDI EE Client)負責任務(wù)配置及遠程監控,服務(wù)器軟件包含BeeDI EE RJS和BeeDI EE Monitor(僅Windows平臺),分別負責任務(wù)運行和及本地監控,用戶(hù)可以通過(guò)Client遠程登錄到RJS進(jìn)行任務(wù)的發(fā)布,刪除、調度或終止。

  BeeDI CE即BeeDI集群版,基于分布式架構,客戶(hù)端(BeeDI CE Client)負責任務(wù)配置及運行監控,任務(wù)服務(wù)器(BeeDI CE RJS)負責任務(wù)運行,資源管理器(RM)負責任務(wù)在多個(gè)任務(wù)服務(wù)器的自動(dòng)部署執行,用戶(hù)可以通過(guò)客戶(hù)端登錄到RM進(jìn)行任務(wù)的發(fā)布,刪除、調度或終止。



  



  BeeDI主要功能如下:


  數據轉換(數據集成) 


  1.支持數據接口如下表:


Oracle 8i / 9i / 10g / 11g / 12c

DB2 7.2 / 8.1 / 9.5 / 9.7 / 10.5 / AS 400

Sybase ASE 12.5 / 15.7

SqlServer 2000 / 2005 / 2008 / 2012 / 2014

Mysql 4.0 / 5.0 / 5.6

Access 97 / 2000 / 2003 / 2007 / 2016

Teradata 14.10

Hadoop 2.6.0(Hive1.1/HBase1.0)

MongoDB 3.3

PostgreSQL 8.0 / 10.1

Gbase 8.3

Oscar 7.0

Excel 97 / 2000 / 2003 / 2016

Dbase 3 / 4 / 5 Foxbase2.1

Foxpro 6.0

Informix IDS 10.0

InterBase 7.1/Ingres 9.3

Lotus Notes 7

DM 6.0

KingbaseES 7.1

Lucene 5.2

Avro

文本/XML

Web Service

 

    2.支持ETL元數據管理功能,采用圖形操作界面輔助用戶(hù)完成數據抽取、轉換、裝載等規則的設計。
  3.提供異步ETL過(guò)程處理模式,數據抽取、轉換及裝載過(guò)程并行執行,實(shí)現數據的高速處理,滿(mǎn)足G、T級的數據轉換。
  4.支持各種字段級的映射轉換,如類(lèi)型轉換、字段運算、參照轉換、字符串處理、字符集轉換、空值處理、日期轉換、聚集運算、既定取值、字段切分、字段合并等。
  5.支持自定義SQL的數據抽取。
  6.支持MD5、SHA消息摘要計算。
  7.支持DES、AES、RSA數據加密解密。
  8.支持各類(lèi)數據庫大對象(LOB)的讀寫(xiě)。
  9.支持多字段的混合運算。
  10.支持記錄間的合并及計算。
  11.支持抽取數據的分流、過(guò)濾。
  12.支持橫表、縱表轉換。
  13.支持映射自動(dòng)匹配,可自動(dòng)完成異構數據庫間數據類(lèi)型的映射。
  14.支持批量表的遷移映射,遷移信息包括表名、字段屬性、主鍵屬性、索引屬性等。
  15.支持表的動(dòng)態(tài)創(chuàng )建,支持表名的動(dòng)態(tài)生成。
  16.支持根據主外鍵的目標表裝載順序自動(dòng)調整。
  17.支持緩慢漸變維的更新,支持代理鍵的生成、慢速變化維度三種更新類(lèi)型的設置等。
  18.支持抽取表及裝載表的重定向。
  19.支持數據接口的重定向,ETL作業(yè)從設計環(huán)境到運行環(huán)境的無(wú)縫移植。
  20.支持數據庫存儲過(guò)程及函數的調用。
  21.支持源表和目標表的差異比較及回補。
  22.支持ETL任務(wù)各個(gè)環(huán)節的數據預覽。 

 

  數據聯(lián)邦


  數據聯(lián)邦支持對兩路以上數據流(異構數據庫或文件)進(jìn)行關(guān)系運算產(chǎn)生一路輸出流,包括:
  對多路數據流橫向連接產(chǎn)生一路扁平輸出流,連接方式支持內連接、左外連接、右外連接及全外連接,可以對輸出流進(jìn)行過(guò)濾、分組、排序和去重操作。
  對多路數據流縱向合并產(chǎn)生一路輸出流,支持數據去重操作。

 

  數據同步


  數據同步實(shí)現源系統的數據變化(增、刪、改)實(shí)時(shí)映射到目標庫中,BeeDI提供以下數據同步處理機制:
  時(shí)間戳
  要求源表中存在一個(gè)或多個(gè)字段(時(shí)間戳),其值隨著(zhù)新記錄的增加而不斷增加,執行數據抽取時(shí),程序通過(guò)時(shí)間戳對數據進(jìn)行過(guò)濾,抽取結束后,程序記錄時(shí)間戳信息。
  觸發(fā)器
  要求用戶(hù)在源數據庫中有創(chuàng )建觸發(fā)器和臨時(shí)表的權限,觸發(fā)器捕獲新增的數據到臨時(shí)表中,執行抽取時(shí),程序自動(dòng)從臨時(shí)表讀取數據。
  日志解析
  要求源數據庫為Oracle(8i、9i、10g、11g、12c)、SQL Server(2005、2008、2012、2014)、DB2(9.5、9.7、10.5)、MySQL(5.6)。
  對于Oracle需要開(kāi)啟日志歸檔功能,抽取輸出列中存在邏輯主鍵(邏輯主鍵為在源表和目標表中可以唯一標識一條記錄的一列或多列)。
  SQL Server需要數據庫開(kāi)啟完全事務(wù)日志。
  MySQL需開(kāi)啟二進(jìn)制日志且設置日志格式為ROW。
  DB2需要開(kāi)啟日志且啟用表的完整日志。
  全表比對
  通過(guò)邏輯主鍵逐行比較輸入流和目標表記錄,輸入記錄在目標表不存在則插入,記錄存在但部分信息不同則更新目標數據,如果目標記錄在輸入流中不存在則刪除目標數據。

 

  大數據集成


  大數據集成既支持任意關(guān)系數據庫或文本文件數據到Hadoop系統的傳輸,也支持將Hadoop文本文件及HBase的數據傳輸到任意關(guān)系數據庫或文本文件。軟件通過(guò)Hive接口將數據存為HDFS文本文件,或從HDFS文件中讀取數據。
  Hive
  BeeDI通過(guò)Hive接口批量寫(xiě)入數據到HDFS,并將存入的數據文件映射為數據表。
  讀取數據時(shí),BeeDI支持對HDFS文件數據進(jìn)行選擇、過(guò)濾、分組等操作。
  HBase
  BeeDI提供SQL抽象接口訪(fǎng)問(wèn)HBase,支持將任意關(guān)系數據庫的數據實(shí)時(shí)同步寫(xiě)入HBase數據庫,支持對HBase的增、刪、改操作。讀取數據時(shí),BeeDI支持對HBase數據進(jìn)行選擇過(guò)濾。

 

    文件同步


  BeeDI內置FTP文件傳輸功能,可以通過(guò)FTP傳輸功能同步遠程機器文件夾到本地,也支持本地文件夾同步到遠程機器。FTP傳輸文件采用多線(xiàn)程并發(fā)傳輸,支持文件的斷點(diǎn)續傳。

 

  工作流調度 


  軟件內置工作流建模工具和調度引擎,用戶(hù)可自由定義任務(wù)的觸發(fā)條件及執行路徑,控制多任務(wù)的協(xié)同運行 
  1.支持多任務(wù)的并發(fā)運行,支持并發(fā)任務(wù)的同步完成; 
  2.支持成功、失敗、條件等三種路徑,支持基于全局變量的條件路徑轉移; 
  3.支持任務(wù)的定時(shí)(可基于日、周、月、工作日、時(shí)、分、秒等)觸發(fā); 
  4.支持系統命令、外部程序調用; 
  5.提供HTTP、FTP等文件傳輸功能;
  6.提供郵件通知功能; 
  7.流程運行時(shí)的動(dòng)態(tài)軌跡指示,向用戶(hù)反饋子任務(wù)的執行狀況;

 

  WebService 


  BeeDI可作為數據源向外發(fā)布數據,通過(guò)與Apache HTTP Server的結合,Beeload可作為WebService供用戶(hù)調用,交互的數據采用SOAP封裝,用戶(hù)在IE中可直接訪(fǎng)問(wèn)軟件發(fā)布的數據,用戶(hù)也可以按照標準的WebService接口創(chuàng )建自己的客戶(hù)端程序 獲取數據。
  用戶(hù)可通過(guò)HTTP協(xié)議遠程控制BeeDI中的任何作業(yè),如遠程啟動(dòng)或停止作業(yè),遠程查詢(xún)作業(yè)狀態(tài)。

 

 

  腳本調試 


  在BeeDI中,支持創(chuàng )建三類(lèi)任務(wù):ETL、工作流及Bee腳本,用戶(hù)可以對每種任務(wù)進(jìn)行調試。 
  1.支持ETL、工作流模板視圖到腳本視圖的快速切換,用戶(hù)可直接了解任務(wù)執行細節; 
  2.在腳本視圖中支持任務(wù)的斷點(diǎn)運行,任務(wù)執行到斷點(diǎn)所在腳本時(shí)暫停; 
  3.在腳本視圖中支持逐行單步調試任務(wù),任務(wù)每當執行完一行腳本后即進(jìn)入暫停狀態(tài); 
  4.在任務(wù)處于斷點(diǎn)暫停或結束狀態(tài)時(shí),可以對腳本中變量值的進(jìn)行查看;

 

  作業(yè)監控 


  BeeDI采用作業(yè)調度策略控制任務(wù)的運行: 
  1.支持多個(gè)作業(yè)的并發(fā)運行,可以限制最大運行作業(yè)數; 
  2.支持作業(yè)排隊機制,當已運行作業(yè)達到最大數時(shí),后續啟動(dòng)作業(yè)進(jìn)入排對等待狀態(tài); 
  3.支持作業(yè)的優(yōu)先級設置,多個(gè)作業(yè)處于排隊狀態(tài)時(shí),優(yōu)先級高的作業(yè)首先進(jìn)入運行狀態(tài); 
  4.支持作業(yè)的啟動(dòng)、暫停、恢復運行和停止等控制; 
  5.作業(yè)支持定時(shí)啟動(dòng),提供多種定時(shí)策略,包括日、周、月、工作日、時(shí)、分、秒等,通過(guò)對作業(yè)定時(shí)啟動(dòng)可實(shí)現作業(yè)的循環(huán)自動(dòng)運行; 
  6.直觀(guān)的作業(yè)執行進(jìn)度及狀態(tài)顯示;

 

  集群調度 


  BeeDI支持ETL任務(wù)災備及負載均衡,根據任務(wù)服務(wù)器負載情況自動(dòng)遷移任務(wù)到負載較小的服務(wù)器,當某一服務(wù)器出現故障,其上運行的任務(wù)將被加載到其它任務(wù)服務(wù)器上重新運行。 
  1.支持遷移任務(wù)的斷點(diǎn)續傳功能; 
  2.支持集群環(huán)境中的任務(wù)腳本調試; 
  3.同一工作流的多個(gè)子任務(wù)將分配到多個(gè)任務(wù)服務(wù)器運行;  

BeeDI完全采用數據流的思想定義ETL轉換規則,數據轉換不再局限于一對一的接口方式,而是支持多對多的數據接口方式,界面設計更加直觀(guān)流暢、ETL規則定義更具擴展性。

企業(yè)名片

×

聯(lián)系人:宣向陽(yáng)

聯(lián)系電話(huà):010-82176643

聯(lián)系地址:北京市市轄區海淀區 北京市海淀區東北旺北京中關(guān)村軟件園孵化器1號樓B座1322-5室

在線(xiàn)詢(xún)價(jià)

×

店經(jīng)理 2024-07-10

您好,歡迎光臨北京靈蜂縱橫軟件有限公司 銷(xiāo)售中心,請發(fā)送您要咨詢(xún)的內容

* 手機: * 姓名:

* 內容:

  公司:

(版權所有 科工網(wǎng)&北京天云聚合科技有限公司 © Copyright 2015 - 2022 . All Rights Reserved.) 京ICP備14030211號-5   |   營(yíng)業(yè)執照
關(guān)閉