Представим, что мы обучили две модели кредитного скоринга и хотим объединить их прогнозы. Казалось бы, всё просто: каждой модели назначаем положительный вес и получаем итоговую оценку вероятности дефолта.
Но что, если оптимизация предложит веса 1,34 и −0,34? Получается, что прогноз второй модели нужно не прибавлять, а вычитать. Зачем тогда вообще включать её в ансамбль?
Оказывается, такое решение может иметь вполне рациональное объяснение. В определённых условиях отрицательные коэффициенты позволяют компенсировать взаимосвязанные ошибки базовых моделей. Похожая идея встречается в портфельной теории, где короткие позиции используются для хеджирования рисков.
Меня зовут Иван, я не ML-инженер, а аналитик в сфере финансов и кредитных рисков, но интересуюсь машинным обучением, временными рядами и анализом данных, и занимаюсь собственными исследовательскими и прикладными проектами, и в этой статье я попробую разобраться, когда отрицательные веса действительно полезны. Для этого рассмотрим математическую постановку задачи и проведём эксперимент на 18 моделях кредитного скоринга, сравнив качество и устойчивость различных способов оптимизации.
Читать далееАтрибуция фактов в персональной памяти LLM: гибридный поиск на Postgres + pgvector, эвалы и вопрос «чей это факт»
Я загрузила в RAG свои переписки за несколько лет, чтобы мой ИИ‑агент знал меня и моих друзей. Он действительно узнал меня. А еще Клайда и Крейга из Южного Парка, Афелия из Лиги Легенд и человека, в которого я впервые влюбилась в интернете (это был ролевик за Кайто). А заодно он решил, что я айтишник, не жмот и зожник (конечно, все в мужском роде).
Это статья про то, как устроена персональная память для LLM‑ассистента, и почему самое сложное в ней это не векторы и не реранкинг, а вопрос «чей это вообще факт».
Читать далее«Сбер» открыл сертификационную программу по агентной разработке (Agentic Coding), которая оценивает навыки инженеров по управлению ИИ‑агентами. Она стала одной из первых в мире подобных программ, а оператором выступила «Школа 21», сообщили в банке.
Читать далееSpaceX сообщила, что «новый уровень разблокирован» и представила аркадный проект под названием Starship 2.0. Это браузерная игра, в которой нужно выполнить посадку первой ступени ракеты Super Heavy на платформу Mechazilla. На втором уровне предлагается поиграть в собирание звёздочек и отстрел НЛО с помощью Starship.
Читать далееГенеральный директор Take-Two Interactive Штраус Зельник заявил, что считает Grand Theft Auto одним из самых значимых и ценных развлекательных брендов на планете. Громкая оценка топ-менеджера ожидаемо спровоцировала бурные дискуссии в сети: геймеры не спорят с финансовой мощью франшизы, но отказываются ставить знак равенства между рекордами продаж и художественным величием.
Читать новость далееТайваньская Asus презентовала человекоподобного робота Gallop для автоматизации повторяющихся задач на предприятиях по производству электроники. Пилотный проект с участием клиентов стартует в 2027 году, а продажи робота начнутся во второй половине 2028 года.
Читать далееУ MLM-партнёра, который готовит ролик или текст для личной страницы, ИИ-черновик может незаметно превратить описание задания в обещание дохода. Это мешает конкретной работе: объяснить своё предложение и продолжить разговор без недоказанных результатов. Ниже технический способ подсветить такие места для автора и наставника; это самостоятельный учебный инструмент, а не заявленная функция какой-либо платформы.
Проблема генеративного текста не обязательно в очевидной галлюцинации. Гораздо чаще редактор получает внешне гладкую фразу, в которой одновременно присутствуют проверяемый факт, неподтверждённое сравнение и обещание результата. Все три выглядят одинаково уверенно. Автоматическое исправление здесь опасно: новая модель способна заменить одно недоказанное утверждение другим.
Вместо «ИИ проверяет ИИ» можно использовать более скромный и воспроизводимый механизм. Программа не определяет правду, а отмечает фрагменты, которые автор обязан проверить. Такой линтер не заменит редактора, зато даёт короткий список мест для ручного решения, а результат его работы можно воспроизвести на том же файле.
Ниже минимальный вариант для Markdown. Он не требует внешнего API, не отправляет текст в сеть и не притворяется системой фактчекинга.
Читать далееНедавно я опубликовал на Хабре разбор архитектуры своего open-source инструмента cd (Dmitry-Fedotov-Dev/cd) — легковесной self-hosted системы доставки кода на свой VPS через OpenID Connect (OIDC). Вместо приватных SSH-ключей и статических токенов в настройках репозитория система использует одноразовые подписанные JWT от самой CI-платформы.
Сегодня практическое продолжение цикла: клиентская часть оформлена в официальный GitHub Action cd deploy (uses: Dmitry-Fedotov-Dev/cd@v1) в GitHub Marketplace. Под катом — воспроизводимая инструкция без лишней теории: паспорт экшена, быстрый старт (в одну команду или за 3 шага), требования к контейнеру, три готовых сценария (bundle со сборкой в CI, монорепозиторий и ручной откат через workflow_dispatch), а также таблица диагностики кодов CD-RESULT.
Паспорт инструмента и совместимость (TL;DR)
Параметр Значение / Спецификация Инструмент и репозиторий cd — github.com/Dmitry-Fedotov-Dev/cd (лицензия MIT) GitHub Action (Marketplace) Dmitry-Fedotov-Dev/cd@v1 (cd deploy); для фиксации версии используйте тег @vX.Y.Z Серверные компоненты Демон cdd (systemd, слушает 127.0.0.1 за reverse proxy) и CLI cdctl (Go, без внешних зависимостей) Протокол авторизации cd protocol v1 поверх HTTPS: OIDC JWT (RS256), проверка aud (CD_SERVER), repository, ref, environment Типы проектов (--type) node, static, dockerfile Другие поддерживаемые CI GitLab CI (gitlab/deploy.yml с id_tokens), любой shell-клиент (deploy.sh) Требования к серверу (VPS) Linux с Docker, systemd и reverse proxy (из коробки поддержаны Caddy и автоматизация DNS через Porkbun)
Предусловия: что должно быть готово на VPS и в приложении
Большинство ошибок первого запуска связано не с YAML в GitHub Actions, а с невыполнением контракта серверной части cdd и песочницы контейнера.
Установка демона cdd на сервер
Если управляющий демон cdd ещё не развёрнут на вашем VPS, установите cdd и cdctl от имени root (установщик проверяет контрольные суммы checksums.txt и затрагивает только /usr/local/bin/cd*, /etc/cdd и /var/lib/cdd):
curl -fsSLO https://raw.githubusercontent.com/Dmitry-Fedotov-Dev/cd/v1/install.sh sudo bash install.sh --public-url https://deploy.example.com
Значение --public-url (и будущая переменная CD_SERVER в GitHub) обязательно должно использовать HTTPS и записываться строго без завершающего слеша (https://deploy.example.com, а не https://deploy.example.com/). Сервер проверяет совпадение aud внутри OIDC-токена по точному строковому равенству.
Контракт запускаемого приложения в песочнице cdd
Читать далееПривет, Хабр! Меня зовут Ксения, я занимаюсь тепловыми расчётами серверного оборудования в OpenYard. По образованию я инженер по проектированию радиоэлектронных средств, а сейчас участвую в разработке серверных платформ от первых вариантов компоновки до испытаний готового изделия.
Читать далееКорпоративный мир периодически потрясают известия об увольнениях глав крупных компаний. Гендиректор зачастую становится лицом бренда, нередко он же является основателем. Однако громкий скандал или решение совета директоров могут поспособствовать уходу даже знаменитых CEO.
На прошлой неделе новость об уходе Дженсена Хуанга из Nvidia шокировала многих. Ниже — разбор этого и других громких увольнений, которые показывают, насколько разными могут быть причины и последствия.
Читать далееПоявился Cargo.toml — пора разобраться в трейтах, собрать крейт, запустить тесты. Но ради Rust зачастую приходится открывать другую IDE. Теперь этого делать не обязательно: в GigaIDE появилась поддержка Rust с привычными инструментами разработчика.
Новый плагин Rust объединяет rust-analyzer, Cargo, отладку через LLDB, тестирование и мониторинг потребляемых ресурсов. Ранее мы представили C# и Go. Теперь Rust соседствует с Java/Kotlin, Python и JS/TS в одном интерфейсе.
Читать далееРяд провайдеров центров обработки данных (ЦОД) и крупнейших операторов персональных данных обратились к профильным ведомствам c просьбой разрешить им временно использовать вычислительные мощности за пределами России для поддержки работы российских информационных систем. Так компании хотят обеспечить сохранность части данных при возможных атаках на дата‑центры. Об этом «Ведомостям» рассказал источник в страховой организации, подтвердили два собеседника в консалтинговых фирмах, знакомых с ходом обсуждения инициативы, а также федеральный чиновник.
Читать далееМобильная разработка давно уже не только про Android и iOS. Теперь ещё и за нейронками надо поспевать, с KMP дружить и инфраструктуру мониторить, чтобы не легла от внезапно выросшей продуктивности команды.
28 ноября на X5 Mobile Day встретимся с теми, кто уже набил шишки на реальных проектах. Покажем кейсы X5 Tech, X5 Медиа, Wildberries и и Avito, реальные цифры, технические подробности и побатлимся с коллегами. В программе два параллельных трека — Mobile Dev и AI & Productivity, совместный разбор инженерных кейсов и дискуссия про экономику ИИ.
Читать далееПосле столкновения с санкциями в 2022 году, многие крупные компании ринулись импортозамещать проприетарные забугорные технологии. Не имея достаточного опыта в работе не то, что с отечественным, но даже со свободным программным обеспечением, эти крупные компании стали создавать отдельные подразделения, целью которых было исследование отечественных решений, как со стороны реализованного функционала, так и на предмет применимости в текущем ИТ-ландшафте.
Не могу сказать, что старания были напрасными. Сама идея выглядела благой. Взять разрекламированный отечественный софт, отдать на «растерзание» квалифицированным специалистам созданного подразделения, чтоб посмотрели функционал самого софта и проанализировали насколько он функционально заменяет текущий софт из недружественных стран. И в целом, насколько отечественный софт зрелый. Например, операционная система, система виртуализации, система резервного копирования или офисный пакет. Можно ли отечественное применять и как применять в крупной компании.
Читать далееОдин невидимый символ, который крашит ваш код. Разбираемся, чем отличается проверка пробелов в ASCII и Unicode, и почему стандартные функции с этим не справляются.
Читать далееБерём видеокарту RTX 5060 Ti 16 ГБ, 64 ГБ быстрой DDR5 памяти, запускаем небольшую Qwen3.8 27B Q3 во всю vram, с околонулевым контекстом, получаем неплохую скорость, пишем сапёр/змейку — и оно работает. А дальше подключаем OpenCode, грузим реальный проект и получаем постоянное compacting, уход непонятно в какие дебри, так как она потеряла контекст. Бросаем и забываем эти ваши локальные LLM как страшный сон. Знакомо?
Так выглядит типичный путь тех, кто решил поднять текстовую нейросеть дома. Всё, что не влезает в 16 ГБ видеопамяти, обычно выгружают слоями в оперативку, и скорость падает до дна. А вместе с ней и весь смысл затеи.
Но недавно появился Strata. Это движок под архитектуру Qwen3.8-Flash-Next и следующего Qwen4. Он не гоняет слои туда-сюда, самые востребованные эксперты лежат в видеопамяти, остальные в RAM, а большая справочная таблица — на SSD. Благодаря этому модель на 50+ ГБ работает на обычном игровом ПК с контекстом до 512K, который для работы с кодом ой как нужен. В статье кратко покажу, как запустить её на 16 ГБ VRAM + 64 ГБ RAM, подключить OpenCode и что получается на реальных проектах.
Читать далееВо второй части серии о скрытии сервера за цепочкой прокси мы решаем главную проблему чистого iptables — потерю реального IP-адреса клиента для HTTP-трафика из-за SNAT/MASQUERADE. Вместо полного переписывания инфраструктуры мы применяем гибридный подход: оставляем iptables для произвольных TCP/UDP-портов, а для 443-го порта точечно подключаем Nginx в режиме HTTP reverse-proxy.
Читать далееJava-сериализация — штука удобная, но медленная. Библиотека One Nio решает эту проблему: она генерирует персональные сериализаторы для каждого класса прямо из байткода, используя ASM, Unsafe и MagicAccessorImpl. Результат — сериализация в разы быстрее стандартной и других популярных библиотек.
Но есть нюанс: One Nio ничего не знает про кастомные методы writeObject(), readObject(), writeReplace() и readResolve(). А такие методы есть у многих классов в JDK (ImmutableCollections, InetAddress, DateTime API) и популярных библиотеках вроде Guava. Если попытаться сериализовать, например, List.of() с одним элементом через One Nio, то после десериализации вы получите список с лишним элементом, потому что библиотека честно записала все поля, не понимая кастомной логики.
Меня зовут Андрей, я Java-архитектор в СберТехе. В статье расскажу, как мы научили One Nio вызывать кастомные методы сериализации: реализовали собственный CustomizedSerializer, заставили его работать с defaultWriteObject() и defaultReadObject(), обошли ограничения JPMS на Java 21 и научились копировать объекты произвольных классов с помощью Unsafe. А в конце — честные числа из JMH: сколько мы потеряли в скорости и как в итоге даже выиграли.
Это первая часть из двух. Здесь — архитектура решения, все технические нюансы и подводные камни. Во второй части — разгон сериализации, оптимизация и финальные числа.
Поехали!
Читать далееВыпустили обновление поддержки Frontend/Web для OpenIDE. Главное изменение касается проектов с несколькими JavaScript-модулями: у каждого теперь свои Node.js, менеджер пакетов, настройки линтеров и форматтера, а также отдельные экземпляры языковых серверов. В том же релизе появились настройки реестров для закрытых сетей, подключение отладчика к запущенному Node-процессу и улучшения редактора для HTML и Angular.
Читать далееВсе мы знаем, что в сети постоянно происходит какая-то дичь чертовщина. Этот случай как раз про то. Есть одинаковые виндовые сервера подключенные к коммутаторам Cisco и Huawei. Есть хранилище данных, куда надо хорошенечко так что-нибудь залить. И вот ведь какая незадача. Сервер, подключенный к Cisco, делает это быстро и как два пальца об асфальт. А сервер, подключенный в Huawei, начинает что-то там копировать (причем медленно), проходит несколько минут и копирование вываливается в ошибку. Досадно. Дело за малым:
узнать кто виноват и что делать?