[請益] Database String Array Type

作者: internetms52 (Oaide)   2022-12-02 19:57:25
各位大大好
小弟是一間小公司裡
負責部分核心業務的軟體工程師
為了日益多樣的客群,被安排要規劃新的設計
程式語言使用的是Java,資料庫是Postgres
框架使用了Hibernate及Spring data JPA
有天CTO跟我說想到了個好方法
要把核心業務中
原本關系為多對一的A Table 與B Table
改為多對多關係
並把Key直接用String Array Type
儲存在A Table的某個新欄位裡
這樣一來就有很大的彈性
小弟做了一些功課
向CTO表達了應該加關係表正規化的想法
但CTO不滿意,覺得關系表很多餘
小弟又用String Array Type 在Java世界裡
並沒有完整支援為理由嘗試說服
CTO卻覺得這些都是可以克服的問題...
小弟認為一但使用String Array Type
並且不使用關系表
就很有可能要全部走Native SQL
日後無論延展需求或維護都會相當痛苦
為此非常苦惱
因為核心業務的複雜程度
小弟希望可以降低日後的維護門檻
想詢問各位大大
String Array Type的問題
真的有這麼好克服嗎?
或是有什麼更好的說服理由是小弟沒想到的?
這是小弟首次於軟體版發文
感謝耐心看完的大大們,獻上萬分的謝意
作者: chuegou (chuegou)   2022-12-02 20:23:00
我的建議是不要怕留下技術債 還債的不一定是你
作者: chen09885 (阿喜)   2022-12-02 20:51:00
實際上正規化後各種限制也是問題
作者: abccbaandy (敏)   2022-12-02 21:13:00
推1F,怕什麼,你這專案成功了就丟給菜鳥維護了還能嘴他需求做太慢,你當年XX一天就好
作者: CRPKT (crpkt)   2022-12-02 21:20:00
你們業務邏輯裡有沒有需要從 B 反查 A?
作者: internetms52 (Oaide)   2022-12-02 21:37:00
CRPKT大大您好,主要的邏輯都是從B向A來查詢的,是為了多個B對多個A才這樣做的,因為1B對多A的關係不夠用
作者: neo5277 (I am an agent of chaos)   2022-12-02 22:08:00
存json字串 或是乾脆nosql
作者: jack0204 (Jarbar王朝)   2022-12-02 23:01:00
關係表是有必要的,也可以用NOSQL,或是快逃不過根據主要業務來評估比較好,如果不頻繁的話都行
作者: SHANGOYANYI (彥一)   2022-12-03 00:37:00
需要這麼厚工喔? 一個基本多對多的表是難在哪?XD
作者: alan3100 (BOSS)   2022-12-03 01:05:00
不就一個mapping table就搞定是難在哪pk:id,A_pk,B_pk,isValid,modifyDatestring array或nosql 你都還是要面對是否要強一致性問題
作者: ssccg (23)   2022-12-03 01:37:00
你是要問怎樣比較好,還是怎麼說服你家CTO..如果要表達關係的話,關係表才是最簡單又有彈性的,存個array除了不開新table外,既沒好處也沒什麼很大的彈性啊
作者: internetms52 (Oaide)   2022-12-03 07:16:00
CTO的溝通部分也許跟軟體不太有關,若覺得奇怪就留給小弟我自己解決就可以了,大大們就分享想分享的部分就好,謝謝各位大大的回覆
作者: Jichang (C.C.Lemon)   2022-12-03 08:15:00
有些情況是不太想用 join 兩種方法各有優缺 有json type可以用
作者: brucetu (sec)   2022-12-03 12:35:00
讀寫比例 預估資料總筆數 峰值流量 日常流量這些都會影響你要用哪種方式實作但有一個很簡單的準則就是 如果你小公司 流量小就用寫code最快的方式讓memory去扛一切的問題你家CTO提出的辦法基本上就是寫code最快最懶的方法也就是最省成本建議你就做 萬一效能爆炸 增加硬體成本 責任不在你
作者: SHANGOYANYI (彥一)   2022-12-03 13:24:00
真的照你家CTO那想法做 那以後資料層問題是dev負責還是dba負責?
作者: Firstshadow (IamCatづミ'_'ミづ)   2022-12-03 13:51:00
這種可以當CTO==?
作者: HKCs (路人)   2022-12-03 14:22:00
用json/jsonb吧 反正他提出來的 出事就叫他自己去跟老闆/客戶解釋
作者: OriginStar   2022-12-03 14:37:00
stackoverflow也有人問類似的問題,也有人提出解決方法,所以技術上不是問題,CTO則是考量公司營運未來所以所預先的規劃,即使原PO不做也會找別人做,當然原PO不在意升遷、加薪、年終的話說自己不想負責這塊看能不能請其他同事負責也行
作者: s06yji3 (阿南)   2022-12-03 14:52:00
又不是什麼違背良心的事情XD
作者: hobnob (hobnob)   2022-12-03 17:18:00
CTO不都是自家公司隨便喊的嗎。原PO就照做就好,不必爭論,未來自己當CTO之後就可以做借鏡了
作者: marc47 (思樂冰)   2022-12-04 00:45:00
如果只有幾十萬筆資料,愛怎麼變就讓他變,如果是幾千萬筆以上,要三思,pg的sql analyze很笨,更何況還要用array去拆,及做關聯,explain你看看cost可能都是full table scan,cost可能就嚇死人
作者: ssccg (23)   2022-12-04 03:53:00
那方法怎麼會寫code最快最懶,原po都說了用jpa hibernate關係表直接@ManyToMany就完了,array一定要用postgres的native sql去寫,哪裡省了好像有不少人包括一樓說技術債都以為是在說CTO提了個方便快速的方法,不是吧這篇明明是在抱怨CTO提了個程式就比較難寫又不合常規、但也說不出哪裡好(只說就有很大的彈性、關係表多餘),然後也沒什麼目的只為了少開個多餘(?)table當然實際上也許CTO是有什麼考量,但顯然原PO沒接收到
作者: pttano (pttano)   2022-12-04 09:44:00
可憐喔,爛CTO搭配junior ,真是一絕
作者: ppc ( )   2022-12-04 13:47:00
一樓精闢
作者: superpandal   2022-12-05 18:50:00
一樓三樓是在自爆自己的為人嗎? XD 不過一堆沒講的都是這樣 環境真的不好言歸正傳 解法樓上都有人說了 用json postgres可提取json內的值 或者你取出來反序列化也可以 如果了解json本質 會覺得這格式很不錯postgres有一些json_為前綴的函數
作者: come (come come )   2022-12-05 22:22:00
資料量不大或者存取不頻繁就會以可維護性來考量。或者說追求一致。但是一旦資料量大,就要考慮join成本。這個時候就會認真考慮用json了jsonb是解multi-value的好工具
作者: answermangtr (你今天抓了嘛)   2022-12-06 00:38:00
CTO CIO多的是 不是技術出身的咖 看多了啦
作者: Killercat (殺人貓™)   2022-12-08 08:00:00
問他為啥要過度設計 有沒有有潛在的需求會不會溝通這些東西往往就是junior senior的差別
作者: BigCockman (大雕男)   2022-12-08 10:53:00
還好吧 反正規化的一種而已 做正規化不等於比較好維護跟擴展 坦白說硬要正規化是有點過時的想法了
作者: superpandal   2022-12-08 19:41:00
這不是過度設計 是實作方式不同 一致性與靈活性是可以兼得的 但市面上多半都是看到一致性強但改個小功能就很累的東西框架會加強一致性但也會縮限應用 巨無霸框架是災難

Links booklink

Contact Us: admin [ a t ] ucptt.com