Near-realtime-защита внутри облака: как мы боролись с лавиной ИБ-событий и превращали их в полезные данные

Меня зовут Владислав Архипов, я архитектор команды разработки security‑сервисов в Yandex Cloud. Мы занимаемся как непосредственной безопасностью облачной платформы и её клиентов, так и созданием сервисов безопасности. Итоги 2025 года в сфере информационной безопасности показали, что нагрузка на security‑команды любого уровня растёт вместе с ростом потока данных. На нашем примере: к середине 2025 года количество типовых событий безопасности, которые мы обрабатывали, в среднем составляло 28 млрд в день, а рост за год составил 20%. При этом всё чаще необходимо анализировать потоковые источники данных, где традиционные подходы с периодической выгрузкой информации просто исчерпали себя. В этой статье вместе с руководителем Cloud Security Operations Юрием Наместниковым @namestnikov мы расскажем, как создаём Security Deck и добиваемся прозрачности процессов ИБ, а также о том, как хронологическое хранилище помогает справляться с растущими потоками данных. Покажем, как мы превращаем разрозненные события в стейт и храним в хронологической базе данных, а также в чём отличие нашего запатентованного решения от других на уровне архитектуры.

https://habr.com/ru/companies/yandex_cloud_and_infra/articles/994478/

#безопасность #хронологическое_хранилище #temporal_bd #ydb #security_operation_center #soc #cspm #cnapp

@calmeilles Eustáquio #ydb

How many runways can you see for Burwash airport (Canada) ? : The answer is on https://www.bigorre.org/aero/meteo/cydb/en #burwashairport #airport #burwash #canada #cydb #ydb #aviation #avgeek vl

#ydb

Инженерная история: добавляем 3-ю СУБД в карточный процессинг

В конце сентября Филипп Дельгядо, один из архитекторов карточного процессинга Lekton Sigma, выступил на Yandex Neuro Scale. На конференции он рассказал, как они с командой добавляли поддержку YDB к своему решению. Под катом — интервью с Филиппом, где он поделился с нами ключевыми техническими моментами, которые видит интересными для широкой аудитории Хабра: зачем в принципе добавлять поддержку ещё одной базы данных, сколько разработчиков нужно, чтобы вкрутить лампочку всё запилить, и с какими сложностями они столкнутся при переходе от централизованной PostgreSQL к распределённой YDB.

https://habr.com/ru/companies/ydb/articles/965096/

#ydb #database #процессинг #процессинг_платежей

Очень странные дела или подключаем YDB в AWS NoSQL Workbench

При работе с Yandex Database (YDB) часто возникает потребность в удобном визуальном инструменте для работы с данными. AWS NoSQL Workbench — популярное приложение для моделирования и тестирования NoSQL баз можно использовать и с YDB благодаря DynamoDB-совместимому Document API.

https://habr.com/ru/articles/983678/

#ydb #dynamodb #aws_nosql_workbench #aws #nosql #yandexcloud

Изнанка бэкапов YDB: что остаётся за кадром

Решил собрать нюансы создания резервных копий и восстановления таблиц в YDB. Это не замена документации, а раскрытие деталей, которые не очевидны для тех, кто начинает работать с этой базой данных.

https://habr.com/ru/articles/983512/

#ydb #бекапы #yandexcloud

"When MAGA Comes to Christmas Dinner ~ A glimpse of what Trump’s movement does to its supporters." This article from The Bulwark, the post-Trump refuge for what once was the neoconservative The Weekly Standard, is more Republican Never Trumper's taking no responsibility for the current political mess that they gave birth to going as far back as John Kerry and the Swift Boat ages, Obama and Tea Party movement, etc

That is so infuriating. They like to believe Trump is the start of MAGA when, no, dear, it's not. Trump fostered and monetized to his benefit, both personal wealth and politically, and the destruction of norms and Democracy, on the foundation they built.

In this article, the authors grandmother is stuck in Trump and MAGA world text scams and unauthorized bank withdrawals and a nephew has become a full-fledged neo-Nazi.

I can't take them serious as long as they put Trump as the starting point of all that is crashing and burning in the US. That goes for the 4pm hour on MSNBC/MSNow, too. #USPol

Article quote, "But I can’t abide by the schadenfreude-laden viewpoint that anyone who ever pulled a lever for Trump deserves whatever’s coming to them as a result. The fact is that this political moment is immiserating good people. I don’t blame them for that. I blame him [Trump]." #FAFO #YDB

https://www.thebulwark.com/p/when-maga-comes-to-christmas-dinner-trump-movement-harm-to-supporters-putin-zelensky

Чему меня научила разработка C#-клиента для распределённой СУБД Яндекса

Привет, Хабр! Меня зовут Кирилл Курдюков, и мы с командой делаем YDB (СУБД Яндекса). Как и с языками программирования, популярность СУБД определяется не только их возможностями, но и экосистемой. В предыдущей статье я рассказал о том, как разработать Java-клиент для распределённой СУБД и интегрировать его с популярными ORM. А из этой статьи вы узнаете, как под капотом работает ADO.NET, почему управление пулом сессий может сильно влиять на ваш код работы с базой данных и какой стратегии обработки ошибок можно придерживаться для разработки отказоустойчивых сервисов. Статья будет полезна тем, кто изучает особенности взаимодействия в распределённых системах или просто хочет научиться лучше писать клиентский код, работающий с современными распределёнными системами.

https://habr.com/ru/companies/yandex/articles/978444/?utm_source=habrahabr&utm_medium=rss&utm_campaign=978444

#ydb #c# #яндекс #sdk #субд

Чему меня научила разработка C#-клиента для распределённой СУБД Яндекса

Привет, Хабр! Меня зовут Кирилл Курдюков, и мы с командой делаем YDB (СУБД Яндекса). Как и с языками программирования, популярность СУБД определяется не только их возможностями, но и экосистемой. В предыдущей статье я рассказал о том, как разработать Java-клиент для распределённой СУБД и интегрировать его с популярными ORM. А из этой статьи вы узнаете, как под капотом работает ADO.NET, почему управление пулом сессий может сильно влиять на ваш код работы с базой данных и какой стратегии обработки ошибок можно придерживаться для разработки отказоустойчивых сервисов. Статья будет полезна тем, кто изучает особенности взаимодействия в распределённых системах или просто хочет научиться лучше писать клиентский код, работающий с современными распределёнными системами.

https://habr.com/ru/companies/ydb/articles/978444/

#ydb #c# #яндекс #sdk #субд

@VeroniqueB99 Damn right. Or, as @Lana would say, #YDB.

Just got off the phone with a MAGA relative who was an avid anti- #ACA #Obamacare Fox News viewer since it first come out seeking info on what to do now about the rise in premiums and how most of their immediate family will suffer without health insurance. "I barely can afford food staples. I won't be able to cover any increase in insurance."

It really must be confusing to MAGA for railing against Obamacare for well over a decade then all of a sudden panic because they kind of get what they wish for... #USPol #YDB

«Работает — не трогай», но с YDB можно: испытания отказоустойчивости в боевых условиях

Как YDB разворачивается «в бою», что происходит при сбоях, как работает восстановление, как ведет себя кластер под нагрузкой, с какими сюрпризами столкнется команда, которая будет ее администрировать. Весь анализ — с фокусом на уменьшение операционных затрат и повышение надежности.

https://habr.com/ru/companies/jetinfosystems/articles/974850/?utm_source=habrahabr&utm_medium=rss&utm_campaign=974850

#субд #тестирование #базы_знаний #ydb #отказоустойчивость #архитектура_систем #процессинг #нагрузочное_тестирование #ноды #кластер

«Работает — не трогай», но с YDB можно: испытания отказоустойчивости в боевых условиях

Как YDB разворачивается «в бою», что происходит при сбоях, как работает восстановление, как ведет себя кластер под нагрузкой, с какими сюрпризами столкнется команда, которая будет ее администрировать. Весь анализ — с фокусом на уменьшение операционных затрат и повышение надежности.

https://habr.com/ru/companies/jetinfosystems/articles/974850/

#субд #тестирование #базы_знаний #ydb #отказоустойчивость #архитектура_систем #процессинг #нагрузочное_тестирование #ноды #кластер

Секреты Apache Kafka API: обработка сообщений без потерь и дублей

Меня зовут Андрей Серебрянский, и я люблю Apache Kafka. И гарантии доставки exactly once. И рассказывать обо всём этом на конференциях . Пять лет я строил платформы потоковой обработки данных в финтехе, а теперь вместе с командой работаю над YDB Topics: частью YDB (СУБД Яндекса), которая заменяет Apache Kafka в роли брокера сообщений. СУБД Яндекса уже некоторое время поддерживает Apache Kafka API. Недавно мы расширили этот API, добавив поддержку Kafka-транзакций. Но наличия транзакций в брокере сообщений недостаточно для получения гарантий exactly once. Чтобы неудачно зависший или перезагрузившийся сервер не привёл к дублированию или потере сообщений, нужно хорошо понимать, как именно работают транзакции в брокерах сообщений вообще и в Apache Kafka в частности. Эта статья будет полезна начинающим разработчикам и тем, кто хочет освежить знания или разобраться в тонкостях exactly once обработки данных с помощью YDB Topics или других брокеров сообщений.

https://habr.com/ru/companies/ydb/articles/972180/?utm_source=habrahabr&utm_medium=rss&utm_campaign=972180

#ydb #kafka #exactlyonce #transactions

Секреты Apache Kafka API: обработка сообщений без потерь и дублей

Меня зовут Андрей Серебрянский, и я люблю Apache Kafka. И гарантии доставки exactly once. И рассказывать обо всём этом на конференциях . Пять лет я строил платформы потоковой обработки данных в финтехе, а теперь вместе с командой работаю над YDB Topics: частью YDB (СУБД Яндекса), которая заменяет Apache Kafka в роли брокера сообщений. СУБД Яндекса уже некоторое время поддерживает Apache Kafka API. Недавно мы расширили этот API, добавив поддержку Kafka-транзакций. Но наличия транзакций в брокере сообщений недостаточно для получения гарантий exactly once. Чтобы неудачно зависший или перезагрузившийся сервер не привёл к дублированию или потере сообщений, нужно хорошо понимать, как именно работают транзакции в брокерах сообщений вообще и в Apache Kafka в частности. Эта статья будет полезна начинающим разработчикам и тем, кто хочет освежить знания или разобраться в тонкостях exactly once обработки данных с помощью YDB Topics или других брокеров сообщений.

https://habr.com/ru/companies/ydb/articles/972180/

#ydb #kafka #exactlyonce #transactions

Как работают федеративные системы: рассказываем на примере YDB

YDB — отказоустойчивая геораспределённая СУБД класса Distributed SQL. Она появилась в недрах Яндекса более десяти лет назад и прошла длительный путь от узкоспециализированного хранилища, применявшегося в поисковом движке, до полновесной СУБД общего назначения. Открытие исходного кода YDB в 2022 году стало одной из наиболее ярких опенсорс-инициатив Яндекса. В центре внимания разработчиков YDB долгое время была обработка транзакционной нагрузки, однако в последние годы активно развивается и аналитическое направление. Одна из востребованных аналитических функций — возможность исполнения федеративных SQL-запросов, адресованных к внешним источникам данных. Меня зовут Виталий Исаев, я занимаюсь развитием федеративных возможностей базы данных YDB. В этой статье я расскажу об основных проблемах, возникающих при разработке федеративных систем, и о путях их решения в YDB, а также уделю особое внимание слою коннекторов — компонентов системы, организующих её взаимодействие с внешними источниками данных.

https://habr.com/ru/companies/ydb/articles/962152/

#федеративные_системы #реляционные_субд #субд #ydb

NARRATOR: "Literally everybody knew it would end this way" #ydb

#ydb

Regina you dumb bitch #ydb