國內的ETL工程師日常工作是什麼樣的?

2020-12-12 DataFocus

本人在國內的職位雖不是ETL工程師,但接觸的工作內容和數據、資料庫也與非常精密的聯繫。其實在應聘的時候,如果應聘的是ETL工程師,一般的招聘APP都會給出公司制定的工作內容、崗位職責等等。可以參考這些工作內容對國內的ETL工程師進行簡單了解。

本人是學統計出身的,出學校後一直接觸的工作內容就是與數據打交道。由於本人沒有系統的學習過計算機編程,有一些需要編寫代碼的ETL工具就比較難上手了。近段時間,公司的Boss也意識到這個問題,又考慮到ETL其實是商業智能BI的一個重要的環節,因此就給我們布置任務,了解一下國內外的比較常用的BI產品,看看是否能代替公司現階段使用的ETL工具。

現在市面上最主流的資料庫就是Oracle、Sql server、PostgeSQL等,最常用的ETL工具就是Datastage,Congos,Kettle等。說到ETL,那麼最主要的功能就是對數據的抽取、清洗、轉換,以及最後作為一個數據倉庫的功能。因此本人比對了市面上最主流、性價比較高的幾款BI產品,試圖找出能否用BI產品協助甚至替代ETL工具,幫助企業能更好的利用數據,協助企業制定決策。本人主要研究了國內的帆軟、DataFocus,國外的tableau和PowerBI。應大家的需求,簡單分析一下這四款產品的使用感受和優缺點。

最容易上手的還是國內的兩款產品,因為他們的大部分學習資料都是中文的,還有較多的案例分享和視頻資料,對於新手學習非常友好。

首先是帆軟,帆軟在國內已經是一款非常成熟的BI產品了,官網內部的社區非常活躍,網絡上關於帆軟的學習資料、實際案例也比較多。但是既然是一款比較成熟的產品,那麼弊端也比較明顯,首先功能基本定型了,雖然可以為企業進行一些特殊的功能定製,但是改動不會很大,有時候會無法滿足本人公司的一些業務需求,這點還需改進;其次就是性價比不算高,帆軟產品的價位有點超出我們公司的預算,性價比較高,不是非常划算。

接下來說說DataFocus。DataFocus是近幾年新出的一款BI產品,以「搜索式分析」在BI圈殺出重圍,成為一匹新晉黑馬。本人也在官方申請過試用,感覺這款產品的使用界面非常簡潔,能夠用最少的操作實現用戶的需求,客服的答疑也非常認真到位;在功能上,和帆軟沒有很大的差距,基本都能實現我們公司的需求。最主要的是性價比很高,哈哈哈哈哈~~

最後來說說tableau和PowerBI。因為都是國外的產品,就會有一個通病,就是學習資料太難找了。有時候就算找到了,可能也是英文版的。毋庸置疑,在四款產品中,tableau的可視化能力是最強的,圖形最好看,但tableau也是最貴的,最難學的。如果要將tableau學以致用、融會貫通,可能需要投入大把的精力和金錢。PowerBI的桌面版本雖然是免費的,但它和其餘三款比起來還是稍稍落伍了一些,在數據發生變動、分享等操作方面,遠不及其餘國內的兩款BI產品。

除非註明,否則均為DataFocus企業大數據分析系統,讓數據分析像搜索一樣簡單原創文章,轉載必須以連結形式標明本文連結。

相關焦點

  • 商務智能軟體FineBI的ETL處理
    業務包,進入BIdemo業務包配置界面,如下圖:在頁面下方點擊+ETL表按鈕即可進入ETL處理界面,如下圖:點擊右上角的添加表按鈕即可添加非業務包內的數據表作為轉化表的基本表,如下隨便選擇一張數據表,比如說a_基本信息數據表,選中它,點擊下一步,頁面跳轉到數據表設置界面,此時顯示的是選中的a_基本信息表的設置界面,頁面左半邊為表數據設置區域,右半邊是當前表進行etl
  • 記一個IC工程師眼裡的「同事工作日常」
    所謂近朱者赤,近墨者黑,你和誰在一起,做什麼事,成為什麼樣的人,才決定了你的終點。在工作方面更是如此,我們在選擇未來加入哪家公司前,要慎重考慮,公司是否朝氣蓬勃、欣欣向榮,員工是否團結協作、認真負責,工作氛圍是否融洽和諧……很幸運地,我找到了這樣一個大家庭。半年前,我來到艾為開始了新的工作。
  • Java工程師日常工作需要做什麼
    在所有的IT技術中,Java編程技術一直得到很多人的關注,很多人希望自己能夠成為Java開發工程師。那麼工程師能夠做什麼呢?接下來小編為大家介紹Java工程師的日常工作。很多人對Java工程師的第一印象就是工資高,Java工程師的基本薪資比其他開發人員更高,而且最重要的是Java工程師的人才稀缺。
  • 一個算法工程師的日常
    本文整理自知乎同名討論帖:《一個算法工程師的日常是怎樣的?》,版權歸原作者所有。原討論地址 zhihu.com/question/29692814很多人,也包括我,會好奇:一個算法工程師的日常是怎樣的?
  • 那些考過消防工程師的人,都在擔任什麼樣的工作?
    2019年消防工程師考試又將開始,在巨大的備考壓力下,有的人會動搖,會想,這麼辛苦考消防工程師證真的有用嗎?這般付出真的值得嗎?考過之後,真的有那麼好的前景嗎?考過了又能從事什麼樣的工作?消防工程師證書的興起是由於近幾年火災事故頻頻發生,為了讓企業對消防安全的重視,國家出臺各種消防政策推動消防工程師證書的普及,於是越來越多的人知道了這個證書,並且被它的高含金量和未來的市場前景所吸引。首先,我們來看一下這個證書的用途。1.
  • 為什麼國內工程師收入不及國外的十分之一?
    近日,某權威機構發布國內程式設計師薪資報告,報告顯示,五年工作經驗的工程師最搶手,其中,運維工程師是細分工種薪資最低的,薪酬是平均薪酬的三分之二,測試工程師和遊戲工程師薪酬表現也較疲軟。於是,許多國內的工程師開始抱怨,幹了五年工資還不如一個農民工,為什麼智能硬體這麼火,而工程師的前景卻如此慘澹?
  • 在日常工作當中,產品經理應該如何給工程師講需求?
    產品經理在日常的工作當中,除了要撰寫很多的需求文檔以外,產品經理還有一項很重要的工作就是給開發工程師講需求。產品經理給工程師講需求的過程,其實就是產品經理將自己的想法和一些產品設計的方案,通過工程師能夠理解的語言表達給他們,所以產品經理給開發工程師講解需求的過程當中,就對產品經理的語言表達能力和換位思考能力提出了很高的要求。
  • 商務智能軟體FineBI的ETL數據集
    ETL數據集就是經過ETL處理之後添加進來的數據表,如:新增公式列,join,union等操作,這樣加進來的表前面會有「etl」符號作為標識。下面將通過商務智能軟體FineBI進行介紹。
  • 5g網絡工程師的具體工作是做什麼
    1 5g工程師有很多種首先5g網絡工程師這個崗位也是剛剛出不久,你要看你自己是朝哪個方向發展,因為不同方向的工程師幹的工作內容是不一樣的。這種崗位通常就叫做網絡優化工程師,也是在目前智聯招聘和各個招聘平臺能夠看到最多的崗位這種崗位通常就是對5g的網絡信號進行測試優化分析這樣的崗位,所以這個崗位的用人量也比較大,對於入職這種崗位其實並不要求太高的計算機基礎這種崗位的特點是常年出差,日常工作就是拿一部手機和電腦不斷的測試信號
  • 網絡工程師需要學哪些呢?
    有很多朋友在百度上搜索網絡工程師需要學哪些, 或者有些朋友打算從事網絡工程師這樣的崗位,但是很多小白並不知道自己是學什麼方向的,或者學什麼樣的網絡工程師是正確的,那麼網絡工程師成長日記作者小編來給大家說一下一 網絡工程師的種類我們在學習網絡工程師的時候,應該根據什麼樣的內容和什麼樣的方向來進行選擇網絡工程師的種類
  • 工業工程師是什麼樣的人?
    畢業後能從事哪些工作?一句話,學習期間,要進行哪些工業工程師的基本訓練?所以,關於工業工程專業培養目標的問題,實質上是要回答:工業工程師是什麼樣的人?他們到底是幹什麼的?1 關於「工業工程師」的5種說法「工業工程師是什麼樣的人」不是什麼理論問題,而是一個實踐問題。
  • 嵌入式工程師的工作狀態
    所以想問問從事嵌入式的工程師平常的工作是什麼樣?現在的就業現狀,工資待遇如何,還有就是比起從事軟體開發有哪些區別?以下是熱心網友的回覆:@六角角愛得瑟:2011年畢業搞STM32,主要在工業方面。@老張一笑:樓上有人說了「技術難,工資低」 ,仔細考慮下為什麼就行了,比如你做智能雲控(只做開關及狀態),這樣一個程序如果你有豐富經歷,一天完成了吧,後期你的工作可能修修補補,一直就這幾款產品。對於你的可替代性很低,但是你確實不會再給公司帶來更高的價值,但是如果你自己要做一個產品就比較主動了。@風中的何瓊:很難,這個很難,沒有人帶你,怎麼學,就跟著視頻嗎?能看清操作嗎?
  • 工業工程師(IE)是一群什麼樣的人?
    在廣州工作兩個年頭了,發現廣州有些企業管理落後,不懂IE(工業工程)是做什麼的,很多老闆和管理者會問:工業工程師是什麼樣的人?
  • 我們可以不再使用ETL了嗎?
    因此公司需要更多專為處理數據類型和工作負載而定製的資料庫軟體。從Arbor Software的Essbase開始,出現了一種新的多維資料庫,用於支持在線分析處理(OLAP)工作負載。但是將這些豐富的OLTP和客戶數據遷移到OLAP系統中並不是一項簡單的任務。生產資料庫以不同的方式存儲數據,對必須費力映射到數據倉庫的列使用特殊的命名約定。
  • 什麼是 ETL ?ETL 的常見技術方案是什麼?
    聊一聊數據流是什麼樣子。因為 ETL 的工作主要會體現在一條條的數據處理流上,因此這裡做一個說明。0x01 什麼是 ETLETL,是英文 Extract-Transform-Load 的縮寫,用來描述將數據從來源端經過抽取(extract)、轉換(transform)、加載(load)至目的端的過程。嗯,怎麼理解 ETL 這個東西呢?
  • 近800幅表格,覆蓋機械工程師日常工作中必須查閱的內容!
    一部內容全面實用、圖表查閱方便的機械工程師案頭必備工具書。近800幅表格,覆蓋機械工程師日常工作中必須查閱的內容,並根據機械工程師的設計需要進行了精心取捨與安排。2.點擊圖片 購買本書是針對機械工程師的日常工作查閱需要而編寫的一本簡明實用的機械設計工具書
  • 自學網絡工程師需要看什麼樣的書呢?有沒有推薦的?
    有些朋友諮詢網絡工程師的時候想知道看哪些資料是最好的,或者說有沒有推薦的。網工記小編來說一下日常學習可以寄予哪些資料來進行學習一 首先最好的資料是來自於廠家網絡工程師的幻燈片比如如果你要諮詢網絡工程師那麼你必須首先得知道,在網絡工程師這個行業中最有名的兩個認證,一個是思科認證,一個是華為認證
  • 數通工程師和核心網工程師是有什麼區別?
    不少朋友想進入到通訊行業,通常都會聯繫到網絡工程師成長日記作者小編問到這樣的問題,比如說最常見的就是做數據通訊工程師合作核心網工程師會有什麼樣的區別?一 我們先來說一下什麼叫做數據通訊工程師首先數據通訊是指我們的手機上網的業務,所以數據通訊工程師也相當於網絡工程師,數據通訊工程師的工作,主要是圍繞著數通產品進行技術支持比如網絡工程師成長日記作者小編所寫的,網絡工程師成長日記這個公眾號上500多個項目案例
  • 思科認證網絡工程師ccnp好找工作嗎
    二 學到什麼程度和技術水平是非常關鍵的因為思科的網絡工程師他是一個廠家的職業認證,所以很有可能會產生這樣的情況,就是有些人考到了證書,但是實際所學的技能或者說叫做真實本領不是很好在國內我們一般把這種就是有證書,但是又沒有實際能力的人,通常叫做paper,因為證書本身是可以在網上下載題庫
  • 2019年思科ccIE在國內可以找到什麼樣的工作?
    1 思科認證出來絕大多數都是做網絡工程師。思科認證網絡工程師,本身出來就是作為it行業的網絡工程師的一個認證,所以絕大多數的人本身做的就是網絡工程師的崗位所以能夠做的崗位,其實在智聯招聘上也能搜索到,一般大家可以使用網絡工程師這個關鍵詞搜索職位,就能看到大量這樣的崗位了2 除了網絡工程師之外,其他更多的就是系統集成工程師或者售後工程師