mysql - PHP 批量插入的時(shí)候 判斷數(shù)據(jù)表里面是否重復(fù)怎么優(yōu)化
問(wèn)題描述
場(chǎng)景：從第三方接口獲取到數(shù)據(jù) 比如 獲取到了 500 條，然后批量插入到表，但是要保證唯一。代碼如果是這樣的（name 字段有索引的情況下怎么才能最大化的優(yōu)化），這樣的結(jié)果是有500次的I/O 這個(gè)邏輯怎么優(yōu)化最佳呢；這里還有個(gè)場(chǎng)景如果當(dāng)這 500條插入成功后馬上進(jìn)行二次查詢第三方接口然后再批量插入，主要是考慮到第二種情況:
$datas = [];$Apps = new Apps();foreach ($lists as $k=>$v){ $name = $v[’name’]; $res = $Apps->where([’name’ => $name])->field(’name’)->find(); //如果沒(méi)有記錄 if (empty($res)){$datas[] = [’name’ => $name]; }}if (empty($datas)){ //批量插入 $Apps->saveAll($datas);}
問(wèn)題解答
回答1：保證唯一放在數(shù)據(jù)庫(kù)那邊處理，設(shè)置個(gè)unique就好了吧。這個(gè)不需要PHP來(lái)處理。
回答2：設(shè)置聯(lián)合主鍵
回答3：不能重復(fù)的字段加唯一索引吧
回答4：首先對(duì)該字段加唯一索引，然后SQL改成這樣，?INSERT INTO xx (yy)VALUES(?) ON DUPLICATE KEY UPDATE yy=?但唯一鍵出現(xiàn)重復(fù)時(shí)更新字段，也可以忽略重復(fù)，對(duì)重復(fù)的行不做修改INSERT IGNORE INTO
相關(guān)文章：
1. javascript - 如何將一個(gè)div始終固定在某個(gè)位置；無(wú)論屏幕和分辨率怎么變化；div位置始終不變2. html - vue項(xiàng)目中用到了elementUI問(wèn)題3. javascript - 原生canvas中如何獲取到觸摸事件的canvas內(nèi)坐標(biāo)?4. javascript - vscode alt+shift+f 格式化js代碼，通不過(guò)eslint的代碼風(fēng)格檢查怎么辦。。。5. javascript - 求解答：實(shí)例對(duì)象調(diào)用constructor，此時(shí)constructor內(nèi)的this的指向？6. javascript - 有什么比較好的網(wǎng)頁(yè)版shell前端組件？7. java - 如何寫一個(gè)intellij-idea插件，實(shí)現(xiàn)編譯時(shí)修改源代碼的目的8. javascript - [js]為什么畫布里不出現(xiàn)圖片呢？在線等9. java 中Long 類型如何轉(zhuǎn)換成Double？10. html5 - 有可以一次性把所有 css外部樣式轉(zhuǎn)為html標(biāo)簽內(nèi)style=" "的方法嗎?
網(wǎng)公網(wǎng)安備