批处理脚本 - 在文件中删除重复的令牌

Question

我在文本文件中的重复记号，我想不重复的令牌（保持分隔符）

分隔符是创建新的文本文件：〜@^*^@ 〜
示例文件：

aaa~@^*^@~bbb~@^*^@~aaa~@^*^@~bbb~@^*^@~aaa~@^*^@~bbb~@^*^@~aaa~@^*^@~bbb~@^*^@~aaa~@^*^@~bbb~@^*^@~xxx~@^*^@~bbb~@^*^@~aaa~@^*^@~bbb~@^*^@~aaa~@^*^@~bbb~@^*^@~aaa~@^*^@~bbb~@^*^@~aaa~@^*^@~bbb~@^*^@~aaa~@^*^@~bbb~@^*^@~aaa~@^*^@~bbb~@^*^@~aaa~@^*^@~bbb~@^*^@~aaa~@^*^@~bbb~@^*^@~aaa~@^*^@~bbb 

的结果应该是：

aaa~@^*^@~bbb~@^*^@~xxx 

我found script是删除重复行：

================================== 
@echo off > outfile 
if %1'==' echo which file? && goto :eof 
if not exist %1 echo %1 not found && goto :eof 

for /f "tokens=* delims= " %%a in (%1) do (
find "%%a" <outfile> nul 
    if errorlevel 1 echo %%a >> outfile 
) 

脚本的工作很好的重复线路，
所以我修改从delims：

"tokens=* delims=" 

到

"tokens=* delims=~@^*^@~" 

但它不会工作，我究竟做错了什么？是分隔符保留字之一吗？
谢谢你的任何建议。

Answer 1

FOR DELIMITERS选项将每个字符作为分隔符。你不能使用一系列字符作为分隔符，所以它不会对你的情况有所帮助。

Windows批处理是简单任务的边际文本处理器。对于Windows批处理文件，您有一个特别讨厌的问题。它可能是可行的，但代码将是复杂和缓慢充其量。

我强烈建议你使用一些更适合文本处理的工具。我相信以下任一可用于：

• VBscript的
• 的JavaScript
• Powershell的
• 第三方工具，如Gnu sed for Windows，PERL，...更多

Windows批处理时可能是你可以做出的最糟糕的选择，尤其是对于你的问题。 （这是来自真正喜欢使用批次的人）