Alexander Kuklev (akuklev) wrote,
Alexander Kuklev
akuklev

Natural Language Processing

Не прошло и пяти часов траха, а я реализовал неточный поиск для TwitDo. Привожу лог своего твиттера:
@4todo Проверить поддержку mentions в TwitDo
@4todo Проверить Multitweets, задеплоить
@4todo Прочесть статью Петренко; сделать доклад по точным неприводимым представлениям.
@4done Прочёл Петренку; проверил mentions; multitwits
@4done Доклад о представлениях

Умный алгоритм правильно сопоставил все #done со всеми #todo. Коммичу код, sorhed с утреца задеплоит.

P.S. Алгоритмец вышел нехилый такой. Там и умное учитывание диакритики (аксонов, ударений, точек над буквой йо), и нетривиальная обработка заглавных букв (так что Title Case игнорируется, а CamelCase нет), и обработка сокращений («как» и «кактус» остаются разными словами, а «тригонометрические» и «триг.» распознаются как одно и то же), потом хитрая комбинация двух разных метрик для сравнения слов и сравнения фраз, а в итоге умная машина, которая делает пользователю хорошо.
Subscribe

  • Прогресс

    Десять дней назад, вторая ступень SpaceX'овского корабля Starship своим ходом слетала своим ходом на десять километров вверх, и усмепшно приземлилась…

  • О водосбережении

    Как известно, питьевая вода во многих странах дефицитный ресурс. И даже в дождливой Германии летом иногда случаются засухи, в результате которых она…

  • 36

    Традиционный деньрожденный пост. Год выдался необычный. :)

  • Post a new comment

    Error

    default userpic

    Your reply will be screened

    Your IP address will be recorded 

    When you submit the form an invisible reCAPTCHA check will be performed.
    You must follow the Privacy Policy and Google Terms of use.
  • 10 comments

  • Прогресс

    Десять дней назад, вторая ступень SpaceX'овского корабля Starship своим ходом слетала своим ходом на десять километров вверх, и усмепшно приземлилась…

  • О водосбережении

    Как известно, питьевая вода во многих странах дефицитный ресурс. И даже в дождливой Германии летом иногда случаются засухи, в результате которых она…

  • 36

    Традиционный деньрожденный пост. Год выдался необычный. :)