Успешные тестирование производительности и нагрузочные испытания – важнейшие условия для выбора аналитической системы массивной обработки больших данных. В этой публикации я хочу поделиться подходами к тестированию, которые используются нашей командой как в проектной работе, так и при разработке Lakehouse-платформы данных Data Ocean Nova, и познакомить вас с результатами сравнения различных движков и систем. Вы узнаете, как правильно ставить цели, выбирать методику и из каких сценариев ее нужно составлять, как протоколировать результаты и делать выводы. И самое главное – получите ответ на вопросы: кто быстрее: заяц Trino или антилопа Impala?
Читать далееКомпания Haulmont совместно с Группой Астра и Axiom JDK создает некоммерческое партнерство для развития открытой российской среды разработки – OpenIDE.
Все три компании имеют огромный опыт в создании популярных продуктов для разработчиков и мы верим, что сможем сделать качественный продукт. Мы не планируем изобретать велосипед и будем использовать в качестве основы популярную среду с открытым кодом IntelliJ IDEA Community Edition.
Почему это хорошая новость для российских разработчиков? Чем это отличается от самой IntelliJ IDEA CE или уже существующей российской GigaIDE? Какие языки будут поддерживаться? Что со Spring? Когда релиз? Читайте под катом.
Читать далееЭтот пост не претендует на масштабность, но поскольку я последовательно документирую все этапы разработки бойлерплейта в формате статей, решил описать и эту задачу.
Здесь я приведу пример миграции базы данных для добавления нового поля, а также покажу, как реализовать соответствующий функционал на бэкенде и фронтенде для изменения этого значения.
Читать далееПривет, Хабр! Мы — команда Memory‑Augmented models в составе лаборатории Cognitive AI Systems AIRI. В ходе своих исследований мы стараемся разобраться, насколько хорошо LLM могут обрабатывать большой объем данных и решать задачи на основе них.
Разработчики современных языковых моделей соревнуются в длине контекста и счёт уже идёт на миллионы токенов. Но насколько эффективно LLM пользуются информацией из этого контекста?
Чтобы выяснить это, мы вместе с коллегами из МФТИ и Лондонского института Математических Наук создали новый бенчмарк под названием BABILong, который мы привезли на NeurIPS в этом году. Он оценивает то, насколько успешно современные модели умеют искать информацию в собственных гигантских контекстах. Оказалось, что зачастую главное — это не размер, а умение пользоваться.
В этой статье расскажем подробнее о наших экспериментах, а также о том, как эффективно использовать длинный контекст.
Читать далееАвтоматизация может утомлять, особенно, если опыта в этом не так много, а задачи стоят «интересные» или «нестандартные» — читай сложные или невыполнимые. Не будем рассматривать все возможные варианты, почему задачу считается «интересной» или «нестандартной», а разберёмся с одной задачей, которая тормозит примерно 50% неопытных автоматизаторов — Как пройти капчу!
Читать далееПриветствую! В данной статье мы расскажем об одном из курсов Школы Тестирования КОТ (Как Обучить Тестировщика) Блока качества РСХБ-Интех, посвящённом нагрузочному тестированию. Курс был разработан в связи с возникшей потребностью передавать компетенцию новым сотрудникам данного направления.
Читать далееРанее некоторые инфоблогеры в запрещенной сети сняли ролики о блокировке учетных записей Figma на территории РФ. На днях в локальном чате произошел взрыв новости о том, то Figma внезапно снесла аккаунт пользователю. Позднее в телеграм канале Crauch вышла публикация с сообщением о блокировки аккаунта.
Давайте постараемся разобраться...
Читать далееПривет, Хабр! Меня зовут Раф. Сейчас я работаю аналитиком ценообразования в Яндекс Лавке, куда попал после стажировки в команде аналитики Яндекс Браузера. Параллельно учусь в НИУ ВШЭ и уже успел пройти курс «Специалист по Data Science» в Практикуме.
Любой путь к стажировке начинается с вашего резюме, на просмотр которого рекрутер тратит не больше минуты. В этой статье я расскажу, как составить резюме, чтобы пройти скрининг и попасть на следующие этапы собеседования в Яндексе (или в другой компании), даже если у вас ещё нет опыта работы.
Читать далееИз новостей: сценарист Disco Elysium обратился к игрокам на фоне финансовых проблем, Google Play с 26 декабря 2024 года приостановит выплаты разработчикам из России, People Can Fly сократила свыше 120 человек, акции 11 bit studios упали еще на 34%.
Из интересностей: документалка про Soul Reaver, Wicked Engine в 2024, деформации меша в реальном времени в Unity, самый ужасающий монстр, которого мы можем себе представить.
Читать далееДоброго времени суток сообществу и как говорится «с почином»:)
В силу разного рода причин решил, так сказать, обобщить накопленное за годы ну и поделиться с этим самым сообществом
Формат: High Level Network/Security Design (исключительно для профессионалов)
Рассчитываю на критику ну и мало ли кому пригодится.
Штош, выдохнув, приступаем!
ПынькПривет, Хабр! На связи Александр Конин, ведущий менеджер продукта в Открытой мобильной платформе. В рамках текущей статьи хотелось бы рассказать, как выглядят процессы Delivery и Discovery в продуктовых командах Аврора Центра.
Наш продукт — это корпоративная система управления парком мобильных и стационарных устройств, будь то мобильные телефоны на ОС Аврора или Android, или компьютер на Linux.
Наши заказчики — это крупные и средние компании из разных сегментов экономики, но в основном это: ритейл, банки, промышленные компании, а также различные государственные органы.
При этом у заказчиков разный опыт управления корпоративными парками устройств и взаимодействия с системами, подобными нашим. Для кого-то такие системы являются неотъемлемой частью бизнес-процессов уже очень давно, и они могут дать четкое ТЗ на систему, указав, что из функционала им необходимо. С другими компаниями все менее однозначно — они только принимают решение по цифровизации процессов и пытаются найти решения, которые позволят автоматизировать их текущие кейсы.
Читать далееВ кастинге на роль межсетевого экрана для предприятия были испытаны IDECO и ICS (Internet Control Server) — Интернет Контроль Сервер, далее просто ИКС. Они оба включены в нужные реестры и России и Беларуси. И, опять‑таки, импортозамещение... Учитывая, что больше букв отведено ИКС, о нём и пойдёт речь в данной статье. Да и информации по нему на Хабре практически нет. IDECO хороший, просто хороший NGFW, а ICS — интересный, как минимум, количеством включенных в его состав модулей: тут не только обычный Firewall+IDS/IPS, но и сервера: почтовый, файловый, сообщений на Jabber, IP‑телефонии на Asterisk. Да, и главное отличие, ICS построен на FreeBSD, у которой в разы меньше уязвимостей по сравнению с Ubuntu.
Я никак не связан с компанией-разработчиком ООО "А-Реал Консалтинг" кроме того, что использую этот продукт, приобретённый нашей организацией за полную стоимость. Статья не согласовывалась и не вносились исправления от представителей разработчика. Это только личный опыт использования в работе конкретного программного продукта.
Ну и что он умеет?Что делать, если проект застрял, несмотря на заряженную команду?
Доверившись сознательности программистов, я ожидал, что они сами достигнут ощутимых результатов по проекту, имея референс в виде старого проекта. Но спустя год стало очевидно: мы уперлись в стену, и никаких ощутимых результатов нет. Пришлось срочно разбираться, что пошло не так. В этой статье я делюсь выводами из нашего расследования: о том, почему даже мотивированная команда может буксовать, как технологии вроде GPT помогли найти корень проблемы и какие уроки мы вынесли, чтобы больше не наступать на те же грабли. Если вы руководитель или хотите понять, как сделать команду по-настоящему эффективной, эта статья для вас.
Читать далееПервую часть уроков читайте здесь.
Меня зовут Михаил Иванов, я сооснователь Smart Reading и издательства МИФ (Манн, Иванов, Фербер). Пишу про фондовый рынок, бизнес-модели инновационных компаний и интересные книги. Я много лет живу в США и подсматриваю за развитием этого рынка. Подписывайтесь, чтобы не пропустить полезные материалы об инвестициях и бизнесе.
Новые успешные бизнесы сочетают в себе традиционную специализацию и новые технологии
Развитие интернета, приложений и распространение телефонов позволило получить прямой доступ к миллионам потенциальных клиентов по всему миру. Традиционные игроки, которые хорошо разбираются в предметной части (например, вине или книгах), обычно плохо разбираются в разработке приложений и привлечении трафика.
Это позволило Vivino и Storytel захватить лидерство на своих рынках. Новые игроки чаще всего отталкиваются от технологий и находят новые решения даже на традиционных рынках.
Чичваркин сделал винный магазин, который стоит столько, сколько стоят его запасы.
Датские ребята из Vivino сделали платформу по торговле вином на миллиард!
Читать далееВсем привет! На связи Spectr и рубрика «Что читают наши разработчики». Сегодня разберем практические методы ускорения тяжелых вычислений с помощью оптимизации на GPU в Python.
Узнать о методах ускорения в PythonВсе самые важные и интересные финансовые новости в России и мире за неделю: найдены все виновные в высокой инфляции в РФ (огурец, рыба и Набиуллина), крипту хотят признать имуществом для более удобной конфискации, Илон Маск стал главным богачом всех времен и народов, а Гугл расчехлил свой квантовый чип для мультивселенной безумия.
Читать далееПривет, Хабр!
В августе я собирал здесь 250 вопросов на собесе для продактов. Статью сохранили в закладки 50 раз. Подозреваю, кому-то этот список был полезен при подготовке к интервью, и очень рад, если это на самом деле так. Теперь я попробовал систематизировать российский опыт найма проджектов. Получилось 25 разделов по темам. Сами вопросы спрятал под спойлеры. Сохраняйте себе пост, пригодится при подготовке к интервью.
Посмотреть вопросыСиракузская проблема - одна из самых странных задач математики, которая имеет школьное представлние, но не школьное решение (которого пока нет). Интересно не в лоб смотреть решение задачи, а посмотреть какие идеи требуются для решения. Рассмотрим несколько таких вариантов для "осязания" потенциального решения, которое может появится когда-нибудь...
Разберемся?Задача: показать простейший пример исполняемого BPMN (Business Process Model and Notation — нотация и модель бизнес-процессов), т.е.
а) нарисовали схему workflow (поток задач процесса) и
б) ее исполнили (автоматизировали задачу).
Пример Hello Calculator (Hello World) показывает реализацию примитивного калькулятора как исполняемого BPMN на WFE (workflow engine, WF- engine) «Runa WFE», точнее на RunaWFE_Cloud_Lite.
Ниже показано как просто и быстро («быстрая разработка») создать программу по технологии «визуальная разработка приложения» на BPMN \ WFE \ WfMS. Для собственноручного «программирования без программирования» программы «Простой калькулятор» (в концепции «управление задачами», т.е. с демонстрацией нескольких шагов) – вам понадобится только
а) браузер с интернет (все в облаке, Saas) и б) навык уверенной работы с манипулятором «типа мышь». Конечно типовое использование BPMN WFE - не расчетные задачи и нагруженные транзакционные системы, а управление задачами типа обработки заявок \ заказов (service desk и т.п.), кредитный конвейер и подобные «эстафеты».
1 Hello Calculator
Требования: Создать ПО калькулятора на WFE (free). Сценарий: пользователь вводит первое число (Digit1), второе число (Digit2) и операцию (функцию, Function) между ними (для демонстрации достаточно суммы и разности) и получает результат операции.
Рассмотрим облачную версию, хотя это можно повторить в on-premise Downloads runawfe.org RunaWFE Free Workflow System (BPMS) Version 4.5.0 (инсталляция, хотя пару лет назад были доступны для скачивания и portable и docker – ставил, работало) или runawfe.ru.
Читать далее(Начало – здесь.) Выдержав небольшую драматическую паузу длиною в год, завершаю начатый репортаж о разработке первой версии деталей для большого co2-лазерного станка с ЧПУ. Вполне себе такой лонгрид с приличной кучей иллюстраций совершенно различного качества. Попадается и низкое разрешение. И фото моих каракуль в блокноте. Иногда даже с выпавшими из бороды седыми волосами.
Всех, кому интересно прикоснуться к таинству процесса рождения чего-то материального – милостиво прошу под кат.
Как изгибалась сталь