mysql - PHP 批量插入的時候 判斷數(shù)據(jù)表里面是否重復怎么優(yōu)化
問題描述
場景:從第三方接口獲取到數(shù)據(jù) 比如 獲取到了 500 條,然后批量插入到表,但是要保證唯一。代碼如果是這樣的(name 字段有索引的情況下怎么才能最大化的優(yōu)化),這樣的結果是有500次的I/O 這個邏輯怎么優(yōu)化最佳呢;這里還有個場景如果當這 500條插入成功后馬上進行二次查詢第三方接口然后再批量插入,主要是考慮到第二種情況:
$datas = [];$Apps = new Apps();foreach ($lists as $k=>$v){ $name = $v[’name’]; $res = $Apps->where([’name’ => $name])->field(’name’)->find(); //如果沒有記錄 if (empty($res)){$datas[] = [’name’ => $name]; }}if (empty($datas)){ //批量插入 $Apps->saveAll($datas);}
問題解答
回答1:保證唯一放在數(shù)據(jù)庫那邊處理,設置個unique就好了吧。這個不需要PHP來處理。
回答2:設置聯(lián)合主鍵
回答3:不能重復的字段加唯一索引吧
回答4:首先對該字段加唯一索引,然后SQL改成這樣,?INSERT INTO xx (yy)VALUES(?) ON DUPLICATE KEY UPDATE yy=?但唯一鍵出現(xiàn)重復時更新字段,也可以忽略重復,對重復的行不做修改INSERT IGNORE INTO
相關文章:
1. angular.js - angularjs的自定義過濾器如何給文字加顏色?2. MySQL中無法修改字段名的疑問3. javascript - 如何讓移動端網(wǎng)頁的輸入框固定在底部?4. angular.js - angular內(nèi)容過長展開收起效果5. docker鏡像push報錯6. javascript - 微信小程序限制加載個數(shù)7. 大家好,請問在python腳本中怎么用virtualenv激活指定的環(huán)境?8. android - QQ物聯(lián),視頻通話9. 網(wǎng)頁爬蟲 - 用Python3的requests庫模擬登陸B(tài)ilibili總是提示驗證碼錯誤怎么辦?10. 請教各位大佬,瀏覽器點 提交實例為什么沒有反應
