所有工具
Duplicate Line Remover
Remove duplicate lines
Remove duplicate lines 在您的瀏覽器中本地執行
One item per line. Duplicates are dropped and the first occurrence keeps its position.
About the
重複行刪除器從文字區塊中刪除重複的行,保留每行的第一次出現並刪除後面的每個副本。順序會被保留,因此剩餘的清單會保留原來的順序,當清單是一組步驟或時間軸時,這一點很重要。比較是精確的:只有一個尾隨空格不同的兩行是兩行不同的行,因此當結果看起來錯誤時,通常會首先修剪空格。
Where people use the
- 在批次匯入之前清理電子郵件地址或 ID 清單。
- 查詢列實際包含多少個唯一值。
- 在將重複的日誌行貼到票證中之前將其刪除。
- 對從多個來源收集的 URL 清單進行重複資料刪除。
How to use the
- 1
貼上您的列表
每行一項。任何由逗號或空格分隔的內容都需要先分成行。
- 2
如果需要,修剪空白
在重複資料刪除之前透過文字修剪器執行文字。尾隨空格足以使兩條看起來相同的行被視為不同的行。
- 3
刪除重複項
輸出依其首次出現的順序僅包含每個不同的行一次。
- 4
比較計數
計算前後的行數可以告訴您有多少重複項,這通常是您想要的實際答案。
提示和最佳實踐
- 始終在去重之前修剪空白,而不是之後。
- 如果您想將重複項分組在一起,請先排序;如果您想保留原始順序,請排序。
- 保留原始清單直到您檢查了行數,因為該操作無法撤銷。
常見問題
保留哪個副本?
第一次出現。以後的每條相同的行都會被刪除。如果您需要最後一次出現,請先反轉列表,刪除重複項,然後再反轉回來。
為什麼兩條看起來一模一樣的線仍然存在?
因為它們實際上並不相同。不可見的差異(例如僅一行上的尾隨空格、製表符或 Windows 回車符)將使它們保持不同。先修剪一下。
比較是否區分大小寫?
是的。蘋果和蘋果被視為兩個不同的品系。如果要合併,請先轉換大小寫。
它可以刪除單行中的重複項嗎?
不,這是逐行工作的。對於一個段落中重複的單詞,您需要採用不同的方法。
它可以處理多大的清單?
它受瀏覽器選項卡記憶體的限制。幾萬行的列表就可以了;數百萬人則不然。