13 place 0

1011 Как мы ушли от ETL к CDC: выбираем архитектуру real-time аналитики на PostgreSQL, Kafka и ClickHouse. Часть 1

Habr
wakeupdeadpunk @ Habr · 06/25/2026 05:31 EDT

Как мы ушли от ETL к CDC: выбираем архитектуру real-time аналитики на PostgreSQL, Kafka и ClickHouse. Часть 1

Все началось с просьбы сделать отчеты в реальном времени. На первый взгляд задача выглядела простой, но довольно быстро выяснилось, что существующая архитектура для этого не подходит.Проект был разбит на множество микросервисов, каждый из которых хранил данные в собственной PostgreSQL-базе. Чтобы строить сквозные отчеты, информацию нужно было где-то объединять.На тот момент аналитика уже работала через ETL: раз в сутки Airflow восстанавливал общую PostgreSQL из ежедневных бекапов, а Redash выполнял запросы.

To see detailed statistics for the news please log in »

Read the original

Add your comment
You must be logged in with Facebook to read and write comments.

A newsletter a day!

You may get 10 most important news around midday in daily newsletter. Press the button and we will send you the most important news only, no spam attached.

or register

LIKE us on Facebook so you won't miss the most important news of the day!

News from the same source
Habr Habr
Silicon Valley
George Avalos @ Silicon Valley 1 place · 02/07/2106 01:28 EDT

Newark apartment complex bought for much less than prior value

An East Bay apartment complex has been bought at a price that's well below its prior value. Read more

0

🔮
16.07.2026 ♎︎ Dear Libras, today will bring you some challenging tests and unexpected situations in various areas... Read more ›
Silicon Valley
George Avalos @ Silicon Valley 2 place · 02/07/2106 01:28 EDT

PG&E buys San Jose building to bolster South Bay operations

A PG&E Corp. unit has bought a San Jose building in a move to bolster the utility's South Bay operations. Read more

0

Business Insider
Talia Lakritz @ Business Insider 1 place · today 13:30 EDT

Canadian wildfires are shrouding US cities in smoke and yellow haze. See the eerie photos.

Smoke from Canadian wildfires drifted across North America this week, blanketing cities in a thick yellow haze. Read more

0 newcommer

GSMArena.com
GSMArena.com 1 place · today 13:30 EDT

Infinix Xpad 30 Pro surfaces in retailer listing, here are its main specs

Infinix just unveiled the Hot 70 Pro today, and the company is also working on a new tablet. Meet the Infinix Xpad 30 Pro, which has been prematurely listed on a Belarusian retailer’s website. A listing for the device was also spotted on Infinix's official website too for a very short while before it was taken down. Judging by the name, this seems pretty obviously meant to be the successor... Read more

0 newcommer

SlashGear
SlashGear 1 place · today 13:30 EDT

5 Milwaukee Home Improvement Tools Under $100 Worth Adding To Your Collection

Before spending hundreds on your next tool, take a look at these Milwaukee favorites. They're all under $100 and backed by positive customer reviews. Read more

0 newcommer

Skift
Meghna Maharishi @ Skift 1 place · today 13:25 EDT

Say Goodbye to $9 Tickets. Higher Fares Are Here to Stay, United CEO Says

United CEO Scott Kirby argues that surging fuel costs aren’t entirely responsible for higher airfares. Instead airlines are capitalizing on more pricing power driven by ballooning operating costs and a readjustment in domestic capacity. Read more

0 newcommer

Gizmodo
Passant Rabie @ Gizmodo 1 place · today 13:20 EDT

Meteorite That Crashed Into New Jersey Home Contains Rare Ingredients of Life

An analysis of the space rock traced its origin to a primitive asteroid from the early solar system. Read more

0 fresh

Android Authority
Matt Horne @ Android Authority 1 place · today 13:11 EDT

Rare LG Ultragear deal slashes 33% off this 45-inch curved OLED gaming monitor

LG's 45-inch UltraGear OLED drops to $1,349.99 at Amazon, a rare 33% off deal on this 5K2K ultrawide gaming monitor. Read more

0 fresh

Digital Trends
Pranob Mehrotra @ Digital Trends 1 place · today 13:10 EDT

Your OnePlus phone is switching to ColorOS, whether you like it or not

OnePlus has confirmed that OxygenOS is being retired in favor of ColorOS, with eligible devices worldwide set to receive the option to update once ColorOS 17 rolls out. Read more

0 fresh

Skift
Dennis Schaal @ Skift 2 place · today 13:07 EDT

Fora Travel the Unicorn: It Raised $60 Million at a $1 Billion Valuation

Fora Travel has carved out a nice niche for itself as it taps into the desires of a younger generation of travel advisors passionate about travel and looking for side hustles. Its $1 billion valuation came after just five years in business. Read more

0 fresh

Gizmodo
Isaiah Colbert @ Gizmodo 2 place · today 13:00 EDT

Finally, a Brutally Honest Anime About the Forbidden Love of Fighting Games

'Young Ladies Don't Play Fighting Games' is chock full of johns, pop offs, scrublord-worthy quotes, and demure girls hopping on some good-ass 'Street Fighter 6.' Read more

0 fresh

Slashdot
BeauHD @ Slashdot 1 place · today 13:00 EDT

OnePlus Will Continue Software Updates After US and Europe Exit

OnePlus has confirmed that it will exit the North American and European markets, consolidating its operations under parent company Oppo. Existing customers will continue to receive "software updates, security patches, and applicable support," but OxygenOS will be replaced by Oppo's ColorOS. 9to5Google reports: As a part of its shutdown in global regions, OnePlus has confirmed that its flavor of Android, OxygenOS, is going away. Instead, all active OnePlus devices will... Read more

0 fresh

Android Authority
Chethan Rao @ Android Authority 2 place · today 12:58 EDT

Lenovo’s Tab Plus Gen 2 tablet with that giant speaker is now up for grabs in the US

Lenovo’s power-packed Tab Plus Gen 2 has officially reached US shores following its launch in Europe last month. Read more

0 fresh

The Verge
Robert Hart @ The Verge 1 place · today 12:55 EDT

Google is better at playing this game

Today, the European Union ordered Google to give its AI rivals greater access to Android, the open-source operating system that powers billions of devices worldwide. The demand is hardly surprising. It may look like a defeat on paper for Google, which has spent years resisting exactly this kind of access, but it is a regulatory […] Read more

0 fresh

Business Insider
Henry Chandonnet @ Business Insider 2 place · today 12:52 EDT

Mamdani is targeting deceptive AI-made apartment listings: 'It's called StreetEasy, not StreetHard'

New York City Mayor Zohran Mamdani announced a plan on Thursday to curb misleading AI images in apartment listings. Read more

0 fresh

Business Insider
Sydney Bradley @ Business Insider 3 place · today 12:52 EDT

An AI intimacy startup acquired an app to help couples stay together. Read the LinkedIn DM that sparked the deal.

Two startups were building tools for couples, using AI. Now they're joining forces to help people "stay in love." Read the DM that sparked a deal. Read more

0 fresh

Tom's Hardware
Tom's Hardware 2 place · today 12:52 EDT

Neural atom quantum computing roadmap — how laser-cooled trapped atoms could pave the path beyond physical qubit counts

Neural Atom Quantum Computing is a rapidly accelerating part of the Quantum puzzle. Featuring software-defined configurable arrays, qubits can be physically moved mid-computation, and this roadmap highlights three leading companies, QuEra, Atom Computing, and Pasqal, who operate within the space. Read more

0 fresh

The most popular news from the same source for the last week
Habr Habr
Habr
rzDev @ Habr · 07/09/2026 13:16 EDT

Как я создал локальное хранилище и агрегатор VLESS конфигураций

Я думаю, что все заметили, что в последнее время доступ к большинству зарубежным ресурсам и API оставляет желать лучшего. Для обычного человека потеря связи с любимыми или нужными ресурсами посреди рабочего дня — это очень неприятно. Полагаться на один зарубежный сервер стало неэффективно: узлы падают, скорость проседает. У меня у самого появилась это проблема, поэтому я захотел ее решить.Что я решил сделать, рассказываю дальше Читать дальше Read more

0

Habr
FSA @ Habr · 07/09/2026 13:43 EDT

А мой веб-сервер точно нормально работает?

У меня есть сервер в интернете, который работает с HTTP/2, HTTP/3, с IPv4 и IPv6… Как всё это хозяйство протестировать? Я не нашёл решение и прибёг к помощи ИИ, который мне навайбкодил нужный мне сервис. Всё это хорошо. Но, может быть из этой идеи можно слепить годный продукт или просто доработать этот?Если у вас те же проблемы с тестированием своего сайта, добро пожаловать под кат. Там я расскажу, с какой... Read more

0

Habr
Shpankov (Vivaldi Technologies AS) @ Habr · 07/09/2026 13:46 EDT

Vivaldi 8.1: На спокойной воде

Этот год обещает быть годом комаров, поэтому мы взяли с собой спрей от насекомых, чтобы избавиться от них в Vivaldi и грести, не отвлекаясь.Наша команда усердно трудилась в душном офисе, чтобы сделать вашу работу в браузере ещё более удобной, чтобы вы могли снова наслаждаться летом и — если вам это по душе — смотреть футбол. Читать далее Read more

0

Habr
Rafaell0 @ Habr · 07/09/2026 14:17 EDT

Атомарные регулярные выражения

Регулярные выражение обладают возможностями отслеживания пройденного пути и рефлексией. Разберемся, как использовать эти возможности для захвата фрагментов текста, как применить к ним цвет и вывести в консоль. Читать далее Read more

0

Habr
AWE64 @ Habr · 07/09/2026 14:23 EDT

Мне надоело писать один и тот же код. Поэтому я сделал Featuregen

Привет, Хабр. Я уже не тот беззаботный парнишка, что собирал 486-й компьютер. Время бежит, я скуф успел поработать с C++, C#, Java и Kotlin, последние 10 лет занимаюсь мобильной разработкой. Программирование я до сих пор люблю потому что больше ничего не умею. Но чем дольше работаешь, тем чаще ловишь себя на мысли, что от некоторых вещей начинает подгорать. Сегодня я расскажу, как я попытался избавиться хотя бы от части таких... Read more

0

Habr
marmeladigital @ Habr · 07/09/2026 14:22 EDT

Можно ли продвигать коммерческий сайт на Tilda в 2026 году

Сайт на Тильде может получать поисковый трафик. В 2026 году это уже странно доказывать: в выдаче достаточно проектов на конструкторах, у которых индексируются страницы, растут запросы, приходят заявки. Поэтому вопрос лучше ставить практичнее: в каких случаях Тильда выдерживает SEO-задачу, а в каких начинает мешать работе. Читать далее Read more

0

Habr
DashaPasha (BotHub) @ Habr · 07/09/2026 14:48 EDT

Вышла новая GPT-5.6, GPT-Live и ChatGPTWork: что подготовили OpenAI

Июль 2026 года для OpenAI оказался выходит насыщенным: она одновременно обновила два разных уровня своей платформы: базовый слой языковых моделей и слой голосового взаимодействия. GPT-5.6 вышла как новое семейство моделей для API и Codex, а GPT-Live стала новой голосовой системой ChatGPT Voice. В сумме это выглядит не как косметический релиз, а как заметный сдвиг в архитектуре продуктовой линейки OpenAI.Если упростить до одной фразы, то GPT-5.6 отвечает на вопрос «какую текстовую... Read more

0

Habr
Sivchenko_translate @ Habr · 07/09/2026 14:52 EDT

[Перевод] Сокращаем длительность компиляции проекта на Rust c 30 до 2 минут — пример с 1000 крейтов

Rust скор во время выполнения, а вот компилируется он не так шустро. Едва ли это удивит читателя, имевшего дело с серьёзными базами кода на Rust. В блогах сложился целый жанр постов, повествующих о том, как скостить пару секунд с cargo build.В нашем проекте мы реализовали функцию, позволяющую пользователям писать прямо на SQL, определяя таким образом таблицы и представления. Под капотом этот код на SQL компилируется в код на Rust —... Read more

0

Habr
rootCore @ Habr · 07/09/2026 16:30 EDT

Райкастовый движок на голом Android View. псевдо 3D движок в 500 строк кода

Всех приветствую! Когда речь идет о мобильных играх, то сразу все говорят: Unity, Unreal Engine, Godot. Большинство разработчиков тянут эти огромные комбайны просто " по привычке", априори считая что "сделать по другому" или писать "свой движок" это нереально, да что там... просто невозможно. Лично я никогда не встречал игру сделанную на Unity, которая сразу прекрасно работает. У телефона 3 гига оперативки? Пф, умри, несчастный, ты и так тупишь, кладбище вон... Read more

0

Habr
qmzik @ Habr · 07/09/2026 17:42 EDT

[Перевод] GPT-5.6: передовой интеллект, который растёт вместе с вашими амбициями

Мы запускаем семейство моделей GPT-5.6 в общий доступ после ограниченного предварительного тестирования: наш новый флагман Sol, сбалансированную модель для повседневной работы Terra и Luna — нашу самую экономичную модель.GPT-5.6 Sol задаёт новый стандарт одновременно в интеллекте и эффективности: модель показывает лучшие в своём классе результаты в программировании, работе со знаниями, кибербезопасности и науке, превосходя предыдущие и конкурирующие передовые модели при меньшем числе токенов и более низкой. Read more

0

Most popular sources

  • You see 875 news out of 875.
  • Sources 61 out of 61.
StartupNation 0%
Startup News 0%
ScienceDaily 0%
The Fintech Times 0%
Tech Wire Asia 0%
View sources »

LIKE us on Facebook so you won't miss the most important news of the day!

16.07.2026 13:44
Last update: 13:35 EDT.
News rating updated: 20:33.

What is Times42?

Times42 brings you the most popular news from tech news portals in real-time chart.
Read about us in FAQ section.


Times42 © 2026