[問題] Pandas 匯入資料庫,防止重覆資料輸入

作者: rs6000 (正義的胖虎)   2019-01-11 10:17:17
請問各位大大們
有關 pandas to_sql的問題
我的資料欄位格是如下
data.columns = ['stock_name', 'date',
'open','high','low','close','volume']
當我用 to_sql 是可以很方便地把資料輸入到資料庫中
data[allstocks].to_sql('stcks',engine,if_exists='append', index=False)
但是要如何去避免重覆資料寫入資料庫中呢???
卡關卡好久了...QQ
作者: TuCH (謬客)   2019-01-11 13:00:00
在資料庫裡做欄位的條件
作者: Tarlach   2019-01-11 15:53:00
在sql裡面Insert or ignore into ?
作者: rs6000 (正義的胖虎)   2019-01-11 16:17:00
用 panda的 to_sql 寫入資料庫,預設就沒有pk或 unique
作者: guaptpan (Gua)   2019-01-11 22:57:00
把資料庫的PK撈出來和要放入的資料比對PK,重複就把它從要放入的資料中拿掉?
作者: rs6000 (正義的胖虎)   2019-01-12 07:31:00
目前也是用樓上大大的方法...先從資料庫撈資料跟目前要寫入資料庫的dataframe比對

Links booklink

Contact Us: admin [ a t ] ucptt.com