Вход
Регистрация
Помощь
Итак, "ёфикатор" (мне, правда, как-то ближе название "ёЖИфикатор") для Subtitle Workshop (впоследствии SW). Писал исключительно из интереса освоить скрипты, но вещь получилась вполне функциональная... Что это такое? Текстовый скрипт. Он находит среди выбранных пользователем субтитров слова, содержащие буквы «Е» и/или «Ё», проверяет и, при необходимости, корректирует их, используя расширенную базу «Ё»-слов () или в простонародье «Ё»-словарь. Другие подобные словари (yoX_XXX.dat) пока не тестировались, но по идее скрипт должен нормально работать со всеми расширенными версиями yo2_XXX.dat, т.е. с теми, в которых отсутствуют словоформы, начинающиеся на * (так называемые правила). Свежие версии словаря (а также программу YO.exe, которая обрабатывает обыкновенные текстовые файлы, а значит и сабы) можно найти на сайте . После окончания обработки скрипт выдаёт результаты в виде окна (сколько слов обработано, сколько из них изменено, информацию о словаре и т.д).
Решил, что захламлять тему самим текстом скрипта не стоит. Тот, кому интересно, скачает доаттаченный zip и пpосмотрит текст в спокойной обстановке.
Как заставить скрипт работать?
- Копируем сам скрипт "- YO -.pas" в папку ...\Subtitle Workshop\PascalScripts\
- Скачиваем «Ё»-словарь (, ~0.2MB) и, простоты ради, копируем его туда же.
- Открываем SW и загружаем туда свои субтитры.
- Запускаем скрипт: Инструменты > Скрипты на Паскале > - YO - (или, с большой вероятностью, просто жмём комбинацию клавиш Shift+Ctrl+1).
- Дальше следуем подсказкам, которые вам сделает уже сам скрипт...
- Ускоренный запуск скрипта (необходимо ~1МБ места на диске) - в этом режиме на диске создаётся файл с ежифицированным словарём (т.е. буквы «Ё» во всех словах заменены на «Е»). При последующих запусках скрипта этот «Е»-словарь считывается с диска, а не получается в результате ежификации «Ё»-словаря, что даёт существенный выигрыш в скорости запуска скрипта.
- Сохранять откорректированные титры в колонку «Перевод» - Если эта опция выбрана, то скрипт будет не переписывать откорректированный текст поверх исходного, а сохранять его в колонку «Перевод», которая появляется при включённом "Режиме перевода" (Ctrl-U). В этом режиме SW умеет сравнивать исходные ("Текст/Text") и откорректированные ("Перевод/Translation") субтитры и подсвечивать сделанные поправки, что иногда бывает очень кстати.
- Только бесспорные замены - игнорируются замены, требующие ответа от пользователя.
- Проверять расстановку Ё - если опция включена, то скрипт меняет как «Е» на «Ё», так и «Ё» на «Е», если нет - только первое.
- Начинать с текущей позиции / Только выбранные субтитры - если опция включена, то скрипт будет обрабатывать только указанную часть субтитров, в противном случае - все субтитры, загруженные на данный момент в SW.
- Спорные слова: «Ё» > «E» - опция, которая появляется только при выбранных Проверять расстановку «Ё» и Только бесспорные замены. Она позволяет два режима работы: безопасный (все "сомнительные" слова будут ежифицированы, т.е все буквы «Ё» будут заменены на «E») и консервативный (все "сомнительные" слова останутся без изменений. Сделан для тех, кто желает сохранить частично ёжифицированные фрагменты текста в автоматическом режиме поиска и замены).
- Перед запуском скрипта проверить целостность «Ё»-словаря - для нормальной работы скрипта необходимо, чтобы слова в словаре следовали в алфавитном порядке. Рекомендуется использовать эту опцию только после обновления и/или самостоятельного редактирования словаря.
[list]
[*]Версия 0.06 (02.12.2007) [list]
[*] Добавлена возможность проверки целостности «ё»-словаря (слова в нём должны следовать в алфавитном порядке).
[*] Файл конфигурации теперь сохраняется в папку, где лежат паскалевские скрипты .\PascalScripts\YO.ini (идея D!ig).
[*] Оптимизация скорости: в функциях IsYOEInside & YO2E побуквенный поиск заменён Pos-ом. Выигрыш по сравнению с прежней версией составил 10..15%
[*] Оптимизация скорости: условие "разделителя" (c1<'А') & (c1<>'ё') & (c1<>'Ё') заменено на (c1 in RuAlphabet). Быстрее на ~3% (идея D!ig).
[*] Переписана функция ежификации «ё»-словаря - теперь заметно быстрее.
[*] По многочисленным просьбам трудящихся текст скрипта частично сокращён.
[/list]
[*]Версия 0.05 (26.11.07)[list]
[*] [b]Окно диалога с настройками скрипта[/b]: добавлена опция [i]Сохранять откорректированные титры в колонку «Перевод»[/i]. Если эта опция выбрана, то скрипт будет не переписывать откорректированный текст поверх исходного, а сохранять его в колонку «Перевод», которая появляется при включённом "Режиме перевода" (Ctrl-U). В этом режиме SW умеет сравнивать исходные ("Текст/Text") и откорректированные ("Перевод/Translation") субтитры и подсвечивать сделанные поправки, что иногда бывает очень кстати (идея Bedazzle).
[*] Добавлена опциональная проверка: включён ли в SW-настройках "Режим перевода" и предупреждение, если этого не сделано...
[*] [b]Окно диалога "сомнительных" слов[/b]: сейчас само окно (со всеми его компонентами) создаётся и уничтожается только один раз (идея D!ig).
[*] Теперь можно менять размеры окна и шрифта (левый и правый клик по тексту титра).
[*] Добавлен скроллбар для просмотра соседних титров.
[*] Дополнена обработка тэгов <i>, <b>, <u> & <c:#RRGGBB> в субтитрах.
[*] Добавлен выбор варианта сомнительного слова с клавиатуры: соответственно клавиши «ё» и «е», «Прервать»=«ь».
[*] Расширен список параметров в файле конфигурации.
[*] Дальнейшая оптимизация производительности скрипта (скорость поиска и замены увеличилась на ~15%).
[*] Кое-какие косметические правки...
[/list]
[*]Версия 0.04 (18.11.2007) [list]
[*] В очередной раз переработана функция поиска и замены: приблизительно двукратный выигрыш по скорости по сравнению с версией 0.03 (14.11.2007)
[*] Вместо того, чтобы каждый раз при запуске скрипта создавать в памяти «Е»-словарь (он нужен для поиска), пользователю предоставлена возможность создать файл с этим словарём на диске (требуется столько же свободного места на диске, сколько занимает «Ё»-словарь, т.е. ~1MB). При последующих запусках скрипта с диска будут считываться оба словаря, что даёт большой выигрыш в длительности подготовительных процедур: 0.1s в текущей версии против 7.0s в версии 0.03. В диалог настроек скрипта добавлена соответствующая опция для выбора "Ускоренного запуска скрипта" (15.11.2007)
[*] Добавлено автоматическое сохранение настроек скрипта: последние настройки записываются в текстовый файл c:\Windows\YO.ini (при выходе из скрипта) и считываются оттуда при каждом последующем запуске скрипта (18.11.2007)
[*] Исправлен мелкий баг в процедуре коррекции слов (18.11.2007)
[/list]
[*]Версия 0.03 (11.11.2007)[list]
[*] Исправлен баг с подчеркиванием "сомнительных" букв (обнаружен Stevvie) 05.11.2007
[*] Исправлен баг: не считывалась последняя буква словаря и, как следствие, неверно распознавалось последнее слово - для версии 1.27 слово "ящерёнок" (НуПогоди) 06.11.2007
[*] Фиксированный параметр SIZE, отвечающий за размер выделенной под словарь памяти, теперь определяется автоматически. Больше ошибок, возможных, скажем, при замене словаря словарём большего размера, возникать не должно. Немного изменена функция считывания из файла словаря > Довольно приличный выигрыш в длительности загрузки (НуПогоди) 06.11.2007
[*] При ошибке считывания файла со словарём появилась возможность изменить путь к словарю... Пока только как стринг и пока изменённый адрес не сохраняется (запрос Stevvie) 08.11.2007
[*] Переписаны стандартные SW-диалоги, теперь они полностью независимы от языка SW-интерфейса. Кроме того, они стали чуть "красивее" и, что важнее, функциональнее. (НуПогоди) 10.11.2007
[*] В диалоге настроек скрипта появилась новая опция «Спорные слова: «Ё» > «Е», определяющая как скрипт будет обходиться со спорными словами в режиме автокоррекции: теперь скрипт может либо оставлять такие слова без изменения, либо (безопасности ради) полностью их ежифицировать: "всё">"все" (НуПогоди) 10.11.2007
[*] Обнаружен и исправлен баг в процедуре коррекции слов: в словах с несколькими буквами «Ё» корректировалась только первая буква. Теперь, по крайней мере для несомнительных слов, меняются ВСЕ буквы Ё. Надо поиграться со случаем, когда слово в словаре содержит насколько букв Ё и флажок сомнений «?» одновременно. Кажется, таких слов нет (НуПогоди) 11.11.2007...
[*] Добавлен минисловарь = буквально пару наиболее часто встречаемых слов ("не" & "же") > даёт небольшое ускорение в процедуре поиска и замены. Эффект зависит от содержания титров. Для примера 10x"Джентельмены предпочитают блондинок": без минисловаря - 1:21, с минисловарём - 1:18 (3.8%).
[*] После всех оптимизаций проведены тесты по скорости а) загрузки словаря и б) самой процедуры поиска и замены. Длительность загрузки словаря по сравнению с версией 0.02 уменьшилась на 11.7972-7.09091=4.70629s. Скорость поиска и замены: 3.8483 words/ms > 3.1053 words/ms = 23.9% (НуПогоди) 11.11.2007
[/list]
[*]Версия 0.02 (04.11.2007) Переписана функция поиска, теперь она заметно быстрее. Отдельные диалоги настроек заменены на единое окно с чекбоксами. Первая публичная версия.
[*]Версия 0.01 (01.11.2007) Первая мало-мальски функциональная версия. О-о-чень ме-едленная...
[/list]Проблемы: большие и не очень
- По умолчанию скрипт требует довольно много времени на начальные процедуры. Причина проста: для поиска скрипту необходимо создать в памяти «Е»-копию «Ё»-словаря (т.е. просканировать около миллиона букв «Ё»-словаря и заменить все имеющиеся там буквы «Ё» на буквы «Е»). Начиная с версии 0.04 добавлена возможность ускорять загрузку скрипта за счёт создания на диске дополнительного «Е»-файла (он создаётся рядом с файлом «Ё»-словаря), который будет считываться при всех последующих запусках. Время, которое тратится на загрузку такого файла, несравнимо меньше чем, время, необходимое на его получение путем обработки «Ё»-словаря.
- Скрипт работает только с новыми (yo2_XXX.dat) версиями «Ё»-словаря. Старые версии содержат так называемые правила (их легко отличить: в словаре они идут сразу же после комментариев # и начинаются на *). Хотя обработка таких правил и, как следствие, поддержка старых версий словарей может быть реализована достаточно просто, заниматься этим я пока не планирую.
- Возможны проблемы, если в словаре найдётся слово с несколькими буквами «Ё» (скажем, "трёхведёрный"), но заканчивающееся на '?' (флажок сомнений). В этом случае в диалоге выбора «Ё»- или «Е»-варианта, как и обычно, будет выведено слово из словаря (с буквами «Ё») и слово, в котором ВСЕ буквы «Ё» заменены на «Е».
- Скрипт работает, не выходя из SW. Откат сделанных изменений (сколько бы "ошибок" скрипт ни исправил) делается в один клик (Edit > Undo = Ctrl-Z).
- Как вы сами понимаете, скрипт - это всего лишь текст, так сказать полный open-source. Таким образом, подкорректировать его под собственные нужды и чаяния может (почти) любой.
Багрепорты будут категорически приветствоваться при соблюдении следующих условий:
- Предварительно убедитесь, что проблема не связана с тем, что буква «Е» в русском слове была случайно набрана при английской раскладке клавиатуры. Русское «Е» и английское «Е» только для человека выглядят одинаково, скрипт же чётко различает их и рассматривает английское «Е» (как впрочем и все английские буквы) в качестве разделителя. Например, если «Е» - английское, то для скрипта слово "благонадежный" эквивалентно двум словам "благонад" и "жный". Со всеми вытекающими последствиями: коррекции "благонадежный" > "благонадёжный" вам не дождаться.
- Убедитесь, что проблема не связана со словарём. Иначе говоря, если вы заметили, что фамилия любимой актрисы (скажем, Одри Хепберн) после обработки скриптом превратилась в "Хепбёрн", а вас это непадецки коробит, то сперва поищите это слово в вашем «Ё»-словаре. Если там есть слово "хепбёрн" (а оно там есть), не бомбите меня багрепортами. Для начала советую убрать это слово из словаря. Если же вас этот вариант не устраивает, то пишите багрепорт в ту самую уважаемую организацию, в которую Остап Бендер некогда советовал обращаться моему знаменитому земляку.
- Ну и наконец... В словаре всё ОК, а скрипт чего-то намудрил. Тогда не пишите в стиле "Всё пропало, шеф!", а постарайтесь описать проблему по-человечески. И обязательно укажите, на каком именно фрагменте текста обнаружена проблема, просто сделайте copy-paste - из субтитров в багрепорт.
- Есть планы функции проверки словаря на целостность (алфавитный порядок слов) и его упорядочения при обнаружении ошибок.
- Если есть идеи - пишите. Хоть скриптовый язык прилично ограничен в возможностях, но если что смогу - сделаю. Опять же... см. "Достоинства", п.2.
Прикрепленные файлы
-
__YO__.zip (12,88К)
Количество загрузок:: 13
Сообщение отредактировал НуПогоди: 04 Декабрь 2007 - 21:40
Цитата
:
.
