Re: [請益] 聊聊BI的工作吧 | 社區大學終身學習網
BI廣義來看其實包括了資料儲存,ETL,資料呈現這幾個階段....Tableau,PowerBI,甚至是Excel,:有的比較單純的BI會有SASEG,SASVA的工程師去寫 ...
作者kenshin528 (成立奧凶帝國!!)
看板Soft_Job
標題Re: [請益] 聊聊BI的工作吧
時間Fri Apr 28 01:12:12 2017
小弟這幾年也剛好在做BI相關工作,也可以分享一下心得. BI廣義來看其實包括了 資料儲存,ETL,資料呈現這幾個階段. 每一個階段都有很多不同的工具以及技術可以學習深究. A. 資料儲存: 這部分包含了各種資料庫,結構資料庫,非結構資料庫,MPP資料倉儲或Hadoop等等 每種資料庫又有好幾種選擇,光挑選合適公司以及業務的資料庫就是個學問. 何況資料庫又不是放在那邊就好,還需要管理跟維護. B. ETL ETL我個人覺得是最繁雜的部分. 當公司業務越來越多時,業務邏輯和報表需求也會呈等比級數增加. 這時候如何安排適當的資料流就相當重要,如何避免重複的表格佔空間, 優化各種排程,避免job互相卡資源,如何寫出有效正確又快的SQL都相當考驗 開發者對於資料表格以及業務的了解. SQL寫得好要飯要到老不是亂說的. 管理ETL的工具也很麻煩,我曾經用過商業軟體以及 Open source來處理ETL, 使用上需要兼顧彈性(好不好增加job或連結的資料庫類型), 管理方便(容不容易管理以及呈現job之間的dependency), 以及錯誤處理(當壞了該怎麼辦,能不能重run和寄出告警). 管理工具本身好不好維護或是有回溯機制也都相當重要. 另外一方面,當資料進到資料庫之前也需要做資料清洗,甚至資料重新整理, 也是很常見的事情.如果需要做機器學習,也需要在這個階段將原始資料整成 機器學習要用的欄位.這些東西說難不難,但是相當繁雜. 當熟習業務之後,也需要協調開發人員以及業務需求者, 讓開發人員知道要搜集哪些訊息,才能有效滿足業務需求. C. 視覺化 為了幫助人類理解資料,近來資料視覺化也變成很重要的一塊. 開發視覺化工具,和開發視覺化報表是兩種完全不同的取向. 一般的BI開發者會需要理解業務需求,從資料中拉出適當的欄位轉化為報表. 不同的資料類型有不同的呈現方式. 當熟悉之後,還可以加入自己對業務以及資料的理解,從中找出所謂...power bi題庫在PTTmobile01評價與討論 | 社區大學終身學習網
Re: [請益] 聊聊BI的工作吧 | 社區大學終身學習網
power bi題庫在PTTmobile01評價與討論 | 社區大學終身學習網
[討論] 數據分析師和business intelligence PTT推薦CareerPlan | 社區大學終身學習網
power bi測驗、BI 考試、Power BI在PTTmobile01評價與討論 | 社區大學終身學習網
power bi考題、微軟證照種類、da | 社區大學終身學習網
power bi檢定、power bi題庫在PTTmobile01評價與討論 | 社區大學終身學習網
易經識人學哪裡學?桃園市新楊平社區大學開課資訊
想要學習易經識人學可以去哪裡學?家教、外面補習班太貴?剛好可以善用社區大學的資源來學習各種技能、知識,以下幫大家整理...
Google 智慧應用(入門)哪裡學?臺北市士林社區大學開課資訊
想要學習Google智慧應用(入門)可以去哪裡學?家教、外面補習班太貴?剛好可以善用社區大學的資源來學習各種技能、知識,以下...
A09 PHP程式語言和MySQL資料庫應用哪裡學?臺南市永康社區大學開課資訊
想要學習A09PHP程式語言和MySQL資料庫應用可以去哪裡學?家教、外面補習班太貴?剛好可以善用社區大學的資源來學習各種技能...
日本傳統文化概論哪裡學?苗栗縣大明社區大學開課資訊
想要學習日本傳統文化概論可以去哪裡學?家教、外面補習班太貴?剛好可以善用社區大學的資源來學習各種技能、知識,以下幫大...
探索大自然B哪裡學?臺北市大安社區大學開課資訊
想要學習探索大自然B可以去哪裡學?家教、外面補習班太貴?剛好可以善用社區大學的資源來學習各種技能、知識,以下幫大家整...
大數據 Excel VBA與 Power BI 應用實務哪裡學?新北市永和社區大學開課資訊
想要學習大數據ExcelVBA與PowerBI應用實務可以去哪裡學?家教、外面補習班太貴?剛好可以善用社區大學的資源來學習各種技能...
哲學與人生哪裡學?彰化縣彰化社區大學開課資訊
想要學習哲學與人生可以去哪裡學?家教、外面補習班太貴?剛好可以善用社區大學的資源來學習各種技能、知識,以下幫大家整理...
文學與生活哪裡學?宜蘭縣羅東社區大學開課資訊
想要學習文學與生活可以去哪裡學?家教、外面補習班太貴?剛好可以善用社區大學的資源來學習各種技能、知識,以下幫大家整理...
社區生活與財經資訊哪裡學?桃園市八德社區大學開課資訊
想要學習社區生活與財經資訊可以去哪裡學?家教、外面補習班太貴?剛好可以善用社區大學的資源來學習各種技能、知識,以下幫...
文學與生活哪裡學?宜蘭縣宜蘭社區大學開課資訊
想要學習文學與生活可以去哪裡學?家教、外面補習班太貴?剛好可以善用社區大學的資源來學習各種技能、知識,以下幫大家整理...
日本建築之美哪裡學?臺北市中正社區大學開課資訊
想要學習日本建築之美可以去哪裡學?家教、外面補習班太貴?剛好可以善用社區大學的資源來學習各種技能、知識,以下幫大家整...
學《易經》談人生哪裡學?嘉義市嘉義社區大學開課資訊
想要學習學《易經》談人生可以去哪裡學?家教、外面補習班太貴?剛好可以善用社區大學的資源來學習各種技能、知識,以下幫大...
哲學與人生哪裡學?彰化縣彰化社區大學開課資訊
想要學習哲學與人生可以去哪裡學?家教、外面補習班太貴?剛好可以善用社區大學的資源來學習各種技能、知識,以下幫大家整理...
都市之美哪裡學?臺北市中正社區大學開課資訊
想要學習都市之美可以去哪裡學?家教、外面補習班太貴?剛好可以善用社區大學的資源來學習各種技能、知識,以下幫大家整理出...
文學與生活哪裡學?宜蘭縣羅東社區大學開課資訊
想要學習文學與生活可以去哪裡學?家教、外面補習班太貴?剛好可以善用社區大學的資源來學習各種技能、知識,以下幫大家整理...