[請益] 資料工程轉後端

作者: candydog (Candy)   2023-05-30 11:20:37
小弟目前為大約5-6年資歷資料工程師
技能一直學的很雜, 也不是很深, 如下
分散運算Hadoop, MR, Spark, Hive, Presto
框架 Spring Boot, Flask
DB類 RDB, MongoDB, Elasticsearch
MQ類 Kafka, RabbitMQ, Redis
排程工具Airflow, NiFi
容器化Docker, K8S
資料工程或相關應用因為都為公司內部使用居多,通常沒有特別要求也不會太深入,資料
正確有到位即可,有異常也是人工補補資料…
近期職業倦怠,感覺自身技能跟後端比較接近,想轉職後端,但有沒有太多純後端的經歷
想請教版上轉職過的前輩有沒有建議呢?
個人目前在台北百萬薪
有人說找SI轉最快,但個人想盡量不降薪轉
也不太喜歡SI的工作生態
目前只想到幾個方向:
1.自學加強技能,做side project 補足
2.反正都有到一點沾邊,刷題就對了
3.找Data Backend 或 R&D 類的缺
4.繼續深耕Data Engineer就好
或是前輩們有其他建議也請不吝賜教~感謝
作者: acgotaku (otaku)   2023-05-30 11:58:00
應該可以吧 你資安方面的知識量補一下 應該能找到百萬
作者: candydog (Candy)   2023-05-30 12:01:00
請問資安部分是指OWASP相關的嗎?
作者: DrTech (竹科管理處網軍研發人員)   2023-05-30 12:07:00
,你的經驗,早就包含後端工程師的工作,而且超越一般後端工程師的能力了。直接找就好
作者: acgotaku (otaku)   2023-05-30 12:09:00
差不多這種基本知識,然後身份驗證 OAuth session/cookie
作者: DrTech (竹科管理處網軍研發人員)   2023-05-30 12:09:00
不知職業倦怠的原因,要注意的是:選產業,或選ToC,還是ToB。To B通常很容易又職業倦怠了。
作者: acgotaku (otaku)   2023-05-30 12:12:00
脫離junior後端,可能db讀寫分離ACID這類的情境處理過不過你會的這些工具類 也算日常後端在處理工作會用到的所以我是覺得 你要找一個 medium 的後端應該不會太難
作者: x246libra (楓)   2023-05-30 12:27:00
我後端想去資料, 不給去. 明明覺得後端和資料大同小異
作者: loadingN (sarsaparilla)   2023-05-30 12:30:00
去當web仔也會職業倦怠啊
作者: prag222 (prag)   2023-05-30 12:55:00
不需要降級笑死
作者: layer0930 (皇室御漬梨子醬)   2023-05-30 14:46:00
資料跟後端差蠻多的吧,資料怎麼切分 入庫,怎麼弄pipeline 。一大堆知識要學聚合語法跟純sql 是差不多。畢竟都有相似的。單看要弄什麼看上述能力轉web後端很輕鬆吧 。web後端轉資料才比較難
作者: kfwibsj (我是真的很喜歡你data...)   2023-05-30 15:25:00
後端想碰你分散式運算那塊只能靠機遇
作者: WaterLengend (Leeeeeeeeooooooo)   2023-05-30 15:39:00
珍惜生命 遠離SI
作者: layer0930 (皇室御漬梨子醬)   2023-05-30 15:56:00
分散式運算,現在也沒幾個人真的有寫道吧 。博弈有機會,問題哪些都是核心人員
作者: devilkool (對貓毛過敏的貓控)   2023-05-30 16:19:00
你會的技能很好找吧,直接去面試
作者: TheWhack (我是德華)   2023-05-30 16:58:00
原po已經算後端了吧,只是某些主題目前沒碰過而已刷題直接投後端就好
作者: brucetu (sec)   2023-05-30 17:18:00
問gpt然後叫gpt幫你補知識點
作者: acgotaku (otaku)   2023-05-30 17:43:00
後端一定會碰分散式CAP,碰不到只是服務的rps/qps太小了
作者: cmcer (lazyman)   2023-05-30 19:02:00
找不用分散式運算就能賺很多產業,不要自找麻煩
作者: ripple0129 (perry tsai)   2023-05-30 19:10:00
看這個技能樹你不說我還以為你後端勒
作者: Csongs (西歌)   2023-05-30 19:28:00
我後端技能樹跟你差不多,差在排程工具沒用過
作者: layer0930 (皇室御漬梨子醬)   2023-05-30 20:21:00
所謂的分散式不是只有把服務分開..,如果只是拆解服務這種那真的扯不上分散式運算加上目前很多現行工具跟硬體都很成熟所以才說現在真的有寫道的人不多
作者: Tacaya1001 (咖啡好苦)   2023-05-30 21:17:00
跟你差不多,現在算是一半資料一半後端
作者: DrTech (竹科管理處網軍研發人員)   2023-05-31 00:05:00
分散式有很難嗎…,從後端非同步,主從分離,資料庫各種分片,分離,各種queue,再加上 K8s … 工具都那麼多了。沒到幾千萬用戶同時上線,根本一堆現成solution。資料量大的後端業務,後端與原PO的技能根本是重疊的。後端工程師也要做Kafka,ES,NoSQL,airflow,k8s等工作。看了技能樹,不說還以為原PO就是在搞後端工程師。
作者: arash (KiTAC)   2023-05-31 08:33:00
已經是後端了呀,幾乎都涵蓋到了
作者: layer0930 (皇室御漬梨子醬)   2023-05-31 08:38:00
其實跟用戶數沒關係…,那個只是單純分散服務處理。另外提那麼多工具也只是會用,而不是理解吧
作者: Csongs (西歌)   2023-05-31 08:55:00
平常有維護,除一些運行上的問題,多少都會知道一些機制
作者: Suleika (Suleika)   2023-05-31 09:16:00
原po會MQ一定有碰過分散式架構啊,怎麼好多回覆看起來怪怪的這技能樹可以挑戰加薪轉職
作者: devilkool (對貓毛過敏的貓控)   2023-05-31 09:28:00
MQ不一定用在分散式架構
作者: InfinitySA (~我肥宅我有妹妹~)   2023-05-31 09:30:00
要理解 每個東西都是一門學問QQ一般來說 大部分都要會用就好吧? 少數幾個可以專研
作者: moon2519 (~X~X~)   2023-05-31 13:45:00
資料結構跟演算法補好, 應該轉後端 => 刷題吧!!
作者: previa (.)   2023-05-31 15:59:00
為什麼不去海外找,哥這種技能在陸資拿過400萬up薪資其實是台灣市場水太淺很少公司用得上這些大數據的技術你要把自己放到對的市場,趕快離開台灣吧一堆海外remote這種DE的缺也都200+,隨便找都有,加油轉後端反而降價,要往企業高端走就是要網數據價值挖掘走越偏向決策分析薪資才可能越高,後端甚至前端都遠離決策了建議往海外看
作者: usttsu (拳霸愛好者)   2023-05-31 17:37:00
就是叫你英文先補
作者: previa (.)   2023-05-31 18:35:00
越往決策、分析的性質走走才有機會成為公司決策層這種決策層的薪資或福利往往不輸一流軟體公司中高階崗位這才是比較明確的晉升之路,往後端甚至前端走就遠離這路了除非你未來有機會自己創業才有必要去點那些前後端
作者: loveu8 (RA1-推廣)   2023-06-04 10:58:00
同p的看法,台灣真的有用到大數據的企業不一定這麼多加上決策者,或者使用端,還不清楚這服務能帶給公司甚麼效益的時候,就趨向於統計分析用途,比較沒深度應用就了。不過後端知識可以擴充理解,主要技能的深度跟選擇適合的市場,才會發揮最大價值了
作者: jen1121 (Old_Hsiao)   2023-06-04 13:30:00
5-6年資這麼多東西,消化得完嗎

Links booklink

Contact Us: admin [ a t ] ucptt.com