我想用python對全網的網站進行掃描記錄，想用mysql建個表記錄每個網站的信息，數據量大后怎么能快速的判斷這個網站已經記錄過呢？基本表結構有：id,url,name,datetime等相關字段，url想有唯一性，是拿到url查詢一下判斷沒有數據再插入還是怎么辦？如果做了唯一性索引直接插入時會報錯，謝謝，或是有沒有別的有效的解決辦法？