Символ ‹0xEF,0xBB,0xBF›, отображаемый в файлах. Как их удалить?

perl -pi~ -CSD -e 's/^\x{fffe}//' file1.js path/to/file2.js

Я предполагаю, что инструмент сломается, если в ваших файлах есть другие utf-8, но если нет, возможно, этот обходной путь может вам помочь. (Не проверено...)

Изменить: добавлена ​​опция -CSD согласно комментарию tchrist.

Вы можете легко удалить их с помощью vim, вот шаги:

1) В терминале откройте файл с помощью vim:

vim file_name

2) Удалите все символы BOM:

:set nobomb

3) Сохраните файл:

:wq

Другой способ удалить эти символы — с помощью Vim:

vim -b имя_файла

Теперь эти «скрытые» символы видны (<feff>) и могут быть удалены.

Спасибо за предыдущие ответы, вот вариант sed(1) на всякий случай:

sed '1s/^\xEF\xBB\xBF//'

В Unix/Linux:

sed 's/\xEF\xBB\xBF//' < inputfile > outputfile

В MacOSX

sed $'s/\xEF\xBB\xBF//' < inputfile > outputfile

Обратите внимание на $ после sed для mac.

В Windows

Существует Super Sed, расширенная версия sed. Для Windows это автономный .exe, предназначенный для запуска из командной строки.

Использование tail может быть проще:

tail --bytes=+4 filename > new_filename

Решение @tripleee мне не помогло. Но смена кодировки файла на ASCII и снова на UTF-8 сделала свое дело :-)

Я использовал vimgrep для этого

:vim "[\uFEFF]" *

также обычная команда поиска vim

/[\uFEFF]

Команда «файл» показывает, присутствует ли спецификация:

Например: «file myfile.xml» отображает: «Документ XML 1.0, текст UTF-8 Unicode (с спецификацией), с очень длинными строками, с разделителями строк CRLF»

dos2unix удалит спецификацию.

В Windows вы можете использовать бэкпортированную утилиту recode из UnxUtils .

В Sublime Text вы можете установить Пакет Highlighter, а затем настройте регулярное выражение в настройках пользователя.

Здесь я добавил \uFEFF в конец свойства highlighter_regex.

{
    "highlighter_enabled": true,
    "highlighter_regex": "(\t+ +)|( +\t+)|[\u2026\u2018\u2019\u201c\u201d\u2013\u2014\uFEFF]|[\t ]+$",
    "highlighter_scope_name": "invalid",
    "highlighter_max_file_size": 1048576,
    "highlighter_delay": 3000
}

Чтобы перезаписать настройки пакета по умолчанию, поместите файл сюда:

~/.config/sublime-text-3/Packages/User/highlighter.sublime-settings

Я предлагаю использовать инструмент "dos2unix", проверьте запуск dos2unix ./thefile.js.

При необходимости попробуйте использовать что-то подобное для нескольких файлов:

for x in $(find . -type f -exec echo {} +); do dos2unix $x ; done

Мое почтение.

Сохраните файл без подписи кода.