php - laravel中導入excel 資料量很大的情況下 處理重複資料時如果做最好
用laravel excel導入使用者的excel
能夠預期到的一個excel大概會有幾千到幾萬條不等。
需要判斷不導入重複的用戶，例如導入10000人 資料庫裡面已經有100人了 那麼這100人需要被判斷出來 做另外的邏輯處理。另外9900人導入。並且記錄9900的插入狀態 例如成功8000筆 失敗1900條。想在想到幾個方案 不知道哪個比較合理
1、傳統的批量的插入方法，無法精確到每條數據是否重複或記錄返回狀態。但是效率應該是比較高的。
2、用for循環 插入前 先查詢然後是否存在 然後插入完再記錄狀態 從業務邏輯上是最能符合需求的 但是效率很低，估計很容易就要500錯誤或者timeout。
3、在2的基礎上改進 把整個過程寫入隊列 chunk分組後 進隊列 然後後台處理。缺點就是使用者相對來說體驗比較差，不能立等可取 還需要配合通知系統來做這個。
4、查了下 還有種是用事務 分塊提交，不知道這種如何 還沒有測試。也請各位大大指教。
不知道各位大大還有什麼更好的辦法。能夠在效率和邏輯中都比較平衡的。感謝了
