vestka

Ошибки в ML-моделях: влияние временных признаков и Apache Flink

В процессе разработки антифрод-системы для банков возникают сложности с обработкой временных признаков, таких как Event Time и Watermarks. Например, когда пользователь совершает несколько транзакций за короткий промежуток времени, модель может неправильно интерпретировать данные, что приводит к ошибочным выводам о вероятности мошенничества.

В конкретном случае, несмотря на то что все транзакции успешно обрабатываются в Kafka и Flink функционирует стабильно, модель получает неправильный признак: transactions_in_10_minute_window = 3, хотя фактически было пять транзакций. Это приводит к значительному снижению вероятности мошенничества с 0.91 до 0.42, что может негативно сказаться на безопасности финансовых операций.

Понимание этих ошибок критически важно для повышения точности ML-моделей в финансовом секторе. Правильная интерпретация временных признаков и их влияние на результаты может значительно улучшить эффективность антифрод-систем и снизить риски для банков и их клиентов.

Главное

  • Модель выдает неправильный признак: transactions_in_10_minute_window = 3 вместо 5.
  • Вероятность мошенничества снижается с 0.91 до 0.42.
  • Система использует Apache Flink и Kafka для обработки транзакций.

Упомянуто

Важное из дайджеста

  • Кен Гриффин жертвует рекордные $3 миллиарда Карнеги-Меллон для создания кампуса в Майами

    Fortune · около 20 часов назад

    Генеральный директор Citadel Кен Гриффин объявил о рекордном подарке в $3 миллиарда университету Карнеги-Меллон, который станет крупнейшим индивидуальным вкладом в высшее образование. Подарок включает создание нового кампуса в Майами и поддержку существующего кампуса в Питтсбурге.

  • Крупнейший подарок в истории университетов: $3 миллиарда для Carnegie Mellon

    NYT Education · 1 день назад

    Хедж-фондовый управляющий Кеннет С. Гриффин сделал рекордный подарок в размере $3 миллиардов для Carnegie Mellon University. Это крупнейший университетский подарок в истории, превышающий предыдущий рекорд в $2 миллиарда, переданный Oregon Health and Science University.

  • Эпидемия кори и малярии в Индии: 32 ребенка погибли

    BBC Health · около 13 часов назад

    С начала мая в индийском округе Балагхат зарегистрировано 32 случая смерти детей в результате вспышек кори и малярии. Эти заболевания продолжают представлять серьезную угрозу для здоровья населения в удаленных районах страны.

  • Micron Technologies значительно увеличила доходы

    Nasdaq · около 13 часов назад

    Компания Micron Technologies сообщила о более чем четырехкратном увеличении доходов, превысив ожидания аналитиков Уолл-стрит. В компании также представили прогноз, который оказался сильнее ожиданий рынка.

  • Google DeepMind представила модель Gemini 4 Argon с рекордным объемом вывода

    MarkTechPost · около 15 часов назад

    Google DeepMind анонсировала новую модель Gemini 4 Argon, предназначенную для программирования, юридической и финансовой работы, а также киберзащиты. Модель может генерировать до 1 миллиона токенов в одном ответе, что значительно превышает возможности предыдущих моделей.

  • NASA анонсировала новые научные исследования для лунной базы

    NASA · около 16 часов назад

    NASA выбрала три новых научных исследования для поддержки создания первой лунной базы. Эти исследования помогут понять ресурсы Луны и оценить экологические риски для будущих миссий.

  • OpenAI выпустила GPT-6.1 Sol с улучшенной производительностью и сниженной ценой

    MarkTechPost · около 16 часов назад

    OpenAI анонсировала выпуск модели GPT-6.1 Sol, которая предлагает результаты, близкие к Astra, по сниженной цене. Модель доступна в API OpenAI и предназначена для профессионального использования в кодировании и работе с компьютерами.

  • Google представляет AI-модель Gemini 4 для киберзащиты

    The Verge · около 16 часов назад

    Компания Google анонсировала новую модель искусственного интеллекта Gemini 4 Argon, предназначенную для сложных рабочих процессов в области программного обеспечения и кибербезопасности. Доступ к модели вначале будет ограничен для 'доверенных киберзащитников'.

Открыть полный дайджест →