如何在Unix中将文本文件转换为小写(但使用UTF-8)

GNUSED应该能够处理Unicode。尝试

$ echo 'Some StrAngÉ LeTTeRs 123' | sed -e 's/./\L\0/g'
some strangé letters 123

如果您可以使用python,那么这样的代码可以帮助您:

import sys
import codecs

utf8input = codecs.getreader("utf-8")(sys.stdin)
utf8output = codecs.getwriter("utf-8")(sys.stdout)

utf8output.write(utf8input.read().lower())

在我的Windows计算机上(抱歉:)我可以将其用作筛选器:

cat big.txt | python tolowerutf8.py > lower.txt3