Оптимизация кода 1С и архитектуры вместо покупки железа (конкретная история)

За 15 лет в разработке и анализе производительности 1С я понял одну простую, но неприятную вещь: когда высоконагруженная система начинает тупить, мы инстинктивно виним платформу, железо или СУБД. Но в реальности, даже на тяжёлых бэкендах с тысячами пользователей, узкое горлышко — это почти всегда наш собственный код. Сегодня я расскажу, как мы построили систему мониторинга своими руками, сэкономили 20% на железе (которого у нас, к слову, не «терабайты и сотни ядер», а вполне вменяемые конфигурации) и почему стандартный APDEX может нагло врать вам в лицо. — Платформа 1С 8.3.24. — СУБД Postgres Pro. — Больше 40 серверов 1С в разных контурах (внутренний для сотрудников, внешний для поставщиков). — В пике — более 4000 пользователей. Ежечасно (!) крутятся тысячи фоновых заданий и сотни интеграционных сценариев.

https://habr.com/ru/companies/greenatom/articles/1003544/

#Рostgres_Pro #ClickHouse #оптимизация_кода #производительность #мониторинг_систем #SQLзапросы #RLS #APDEX

ClickHouse и MySql или как подружить две базы

Всем привет, с вами ваш писатель-программист и сегодня мы поговорим о такой штуке как " Архивация ". Представьте, что у вас есть таблица, в которой каждый день появляется 100 000 новых записей. Через год в ней будет 36 миллионов записей. MySQL начнет "тормозить" на сложных аналитических запросах, а удалять старые данные нельзя — они нужны для отчетности. Решение есть! ClickHouse !

https://habr.com/ru/articles/1002730/

#ClickHouse #mysql #Архивация #базы_данных

IT ME on the ClickHouse Blog today.

pg_clickhouse is the fastest PostgreSQL extension on ClickBench.

https://clickhou.se/4qM2v8u

#PostgreSQL #ClickHouse #pg_clickhouse

ClickHouse: MergeTree с нуля

Привет, Хабр! Меня зовут Натаров Иван. Я занимаюсь вопросами обработки, анализа и визуализации данных. ClickHouse сегодня стал стандартом де-факто для аналитических задач, но часто начинающие специалисты тратят слишком много времени на погружение в технологию. Документация зачастую дает либо слишком поверхностное объяснение, либо уходит в технические детали, которые сложны для восприятия. В этой статье мы разберем фундамент ClickHouse - движок MergeTree . Посмотрим, как данные физически хранятся на диске, чем «парт» отличается от «партиции» и почему индекс в ClickHouse работает не так, как мы привыкли это видеть в транзакционных базах данных (например, PostgreSQL или MySQL). Погнали!

https://habr.com/ru/articles/1001054/

#ClickHouse #SQL #Big_Data #СУБД #MergeTree #Хранилища_данных #Data_Engineering #Tutorial

New release of pg_clickhouse, the extension for querying ClickHouse form Postgres. v0.1.4 adds BYTEA support, fixes NULL insertion into Nullable columns, and improves array handling. Details in this post; give it a try!

https://justatheory.com/2026/02/pg_clickhouse-0.1.4/

#PostgreSQL #ClickHouse

Presented at the Berlin Open Lakehouse and AI Meetups, about WarehousePG. Finally found the time to write about the meetup.

My talk was: How we made WarehousePG Open Source (again)

All talks and recordings are linked in the blog posting.

https://andreas.scherbaum.la/post/2026-02-16_open-lakehouse-and-ai-meetup-in-berlin-on-27th-january-2026/

#Berlin #Lakehouse #Clickhouse #WarehousePG #PostgreSQL #Meetup #Iceberg

Medallion в ClickHouse: DWH без миграций схемы

Десять запросов — и ты уже думаешь об индексах. Тысячи запросов — и начинаешь молиться на базу. Миллионы строк — и ищешь, как поделить данные на кластера. А триллионы? Ты уже не инженер. Ты смотритель в зоопарке. И пока ты строишь этот цирк из движков, ответ был прямо перед тобой. В том самом «движке для отчётов», который уже стоит у тебя в углу. Может, покончить со зверинцем БД? Логи, метрики, векторы, живые данные — можно просто положить в один движок. И он давно у вас есть, и, кажется, пора дать ему работать.

https://habr.com/ru/articles/991588/

#ClickHouse #PostgreSQL #Data_Engineering #DWH #Medallion_Architecture #ETL #PeerDB #Realtime_analytics #Data_Vault

Реализация MCP в Open WebUI. Часть 1. Интеграция c Open WebUI

В момент выхода протокола MCP нас очень заинтересовали его возможности. Нам хотелось использовать этот протокол для того, чтобы внутренние пользователи могли обращаться к базе данных в свободной форме и получать данные в течение нескольких минут. MCP для этого выглядел очень хорошо: пользователь может сформировать запрос на удобном для него языке, а LLM поймет, что нужно сделать и сделает это. На первый взгляд MCP в связке с LLM полностью закрывал данные проблемы, однако с ростом объема данных стало заметно, что LLM не удается обрабатывать их быстро и качественно, а написание SQL запросов для нее не всегда легкая задача (даже если примеры этих запросов у нее есть в промпте). В итоге мы получили потерю контроля над контекстом модели и непредсказуемый результат. В этой части я расскажу про интеграцию с Open WebUI и какая архитектура модели позволила победить вышеуказанные проблемы. Следующие статьи расскажут о реализации MCP таким, каким он позволяет выполнять наши задачи (но не финальной версии). Эта статья может быть полезна всем, кто строит свои модели на основе Open WebUI или еще только выбирает фреймворк, на котором предстоит строить будущую модель К интеграции с Open WebUI

https://habr.com/ru/articles/993802/

#openwebui #mcp #clickhousemcp #clickhouse #интеграции

We have temporarily paused the discussion on digital sovereignity to enjoy some free food and beers from #Clickhouse, an American VC funded company. #FOSDEM

Как мы сократили объем данных в 10 раз, не повредив пользовательскому опыту, или переезд Postgres → ClickHouse

Всем привет, меня зовут Алексей Леонтьев, я техлид и архитектор на проекте Smartbot в компании KTS. Smartbot — это nocode-платформа для настройки сценариев чат-ботов, которые могут работать в нескольких соцсетях и мессенджерах одновременно. Мы храним много данных о событиях, которые обрабатывает наша платформа. Раньше для этого мы использовали Postgres. Но возникла задача сократить потребляемые кластером ресурсы. В этой статье я расскажу о том, как мы бесшовно перенесли данные из Postgres в ClickHouse. И при этом сократили оперативную память в 4 раза, а размер потребляемого дискового пространства — на порядок.

https://habr.com/ru/companies/kts/articles/988510/

#Postgres #clickhouse

New pg_clickhouse release today, v0.1.3 improves time zone conversion, UUID and INET support, test runtime, and code quality. It also introduces a security policy. Easy upgrade, no need to `ALTER EXTENSION`, just reload the library.

https://github.com/ClickHouse/pg_clickhouse/releases/tag/v0.1.3

#PostgreSQL #ClickHouse

I’ll write a longer thing about it but #clickhouse is the craziest leap forward in observability technology I’ve ever seen. The ability to process queries of billions of logs in 1-2 seconds is unlike anything on the market I have tried. #observability

ok so i spent a couple days wiring some tricky service logs up to #clickhouse through #vector and now i want literally every line of log output on my hosts to do that, has anybody else played with this? https://vector.dev/

🌗 ClickHouse 正式收購 Langfuse：聯手打造頂尖 LLM 工程平臺
➤ 當高效能數據庫遇上生成式 AI 觀測平臺，加速 LLM 應用規模化生產
✤ https://langfuse.com/blog/joining-clickhouse
開源 LLM 工程平臺 Langfuse 宣佈正式併入 ClickHouse 旗下。這項收購源於雙方在技術架構上的深度合作：Langfuse 在 v3 版本中為了克服高吞吐量數據處理的瓶頸，已將核心數據層遷移至 ClickHouse。收購後，Langfuse 承諾將維持其開源精神與自託管（Self-hosting）路徑，並確保現有雲端服務不受影響。透過 ClickHouse 強大的工程資源，Langfuse 將加速開發更高效、穩定且符合企業級合規要求的追蹤與評估工具，協助開發者縮短 AI 代理（Agents）從實驗室到生產環境的開發週期。
+ 「對於自託管用戶來說，看到官方承諾不更改開源協議（License）真的鬆了一口氣。ClickHouse 的加入
##科技併購 #開源軟體 #AI基礎建設 #LLM工程 #ClickHouse

🎉 Breaking news: #ClickHouse swallows #Langfuse whole! 🤯 Don't worry, dear user, absolutely nothing will change... except everything. Welcome to the magical world where acquisitions mean "business as usual" and your roadmap is still shrouded in ✨ corporate mystery ✨.
https://langfuse.com/blog/joining-clickhouse #Acquisition #BusinessAsUsual #CorporateMystery #DataNews #HackerNews #ngated

ClickHouse Acquires Langfuse

https://langfuse.com/blog/joining-clickhouse

#HackerNews #ClickHouse #Langfuse #Acquisition #TechNews #DataAnalytics

Куда Clickhouse прячет данные и как их восстановить

Clickhouse никогда не удаляет ваши данные, главное помнить об этом и знать где искать. Наш кейс миграции на Clickhouse Keeper, история потери и восстановления данных

https://habr.com/ru/articles/985844/

#Clickhouse #dba

Ya esta disponible La Experimental #17:

🔧 Apps de Markdown
🚀 Django 6.0
💻 Navegador Markdown CLI
📚 Curso ClickHouse
🧑🏻‍💻 App de diagramas
🐍 Tool Python
💾 Comparativa de data tools
🌩️ Gestor de tareas SelfHosted
💼 Guía salarial Tech España

Link: https://open.substack.com/pub/laexperimental/p/le-17?r=54y3on&utm_campaign=post&utm_medium=web&showWelcomeOnShare=true

#ia #ai #python #tech #technology #selfhosting #cli #linux #opensource #development #dev #markdown #Django #ClickHouse #data #spain

Dear #infosec #lazyweb Are there any browsers that support sending their #logs to #ElasticSearch / #ClickHouse etc?

I'd kinda like to see what these fucking programs are doing with all my data and the way I normally see what a fucking program is doing is by #regex matching against a #log

(This post was indeed inspired by a post about garbage collecting fail2ban rules)

@andruwa13 @lina

Я сам був в шоці.
Але вони після того, як у них все лягло, самі описали, що відбулося.
І в ньому вони згадували про #clickhouse