12 place 0

931 Платформа данных на минималках. Часть 1: проблемы Data Lake и роль Iceberg

Habr
devtinden (Selectel) @ Habr · 04/14/2026 04:00 EDT

Платформа данных на минималках. Часть 1: проблемы Data Lake и роль Iceberg

Представим ситуацию: у нас есть сервисы, которые пишут логи событий и сообщения из очередей (Kafka, RabbitMQ) в формате Avro для гарантии схемы и потоковой доставки. В это же время отдел машинного обучения работает с датасетами в Parquet — ребята ценят столбцовое хранение и производительность на скалярных чтениях.  Соседняя команда фиксирует фактовые таблицы в ORC, поскольку этот формат подходит для тяжелых аналитических агрегаций. Пока объемы данных измерялись гигабайтами, такой «зоопарк форматов» был терп

To see detailed statistics for the news please log in »

Read the original

Add your comment
You must be logged in with Facebook to read and write comments.

A newsletter a day!

You may get 10 most important news around midday in daily newsletter. Press the button and we will send you the most important news only, no spam attached.

or register

LIKE us on Facebook so you won't miss the most important news of the day!

News from the same source
Habr Habr
Silicon Valley
George Avalos @ Silicon Valley 1 place · 02/07/2106 01:28 EDT

Newark apartment complex bought for much less than prior value

An East Bay apartment complex has been bought at a price that's well below its prior value. Read more

0

🔮
24.05.2026 ♏︎ Today, the day for Scorpio is characterized by a clear dominance of financial aspects and... Read more ›
Silicon Valley
George Avalos @ Silicon Valley 2 place · 02/07/2106 01:28 EDT

PG&E buys San Jose building to bolster South Bay operations

A PG&E Corp. unit has bought a San Jose building in a move to bolster the utility's South Bay operations. Read more

0

Irish Tech News
Marc-Roger Gagné MAPP @ Irish Tech News 1 place · today 20:36 EDT

When the Model Performs

The past year has changed the legal practice in a way few of us are prepared to admit. Clients who could barely assemble a cohesive sentence now arrive with polished arguments, procedural certainty, and the tone of laureates. They feed their cases into DeepSeek and come back convinced they have found the winning theory, with […] Read more

0 newcommer

Inc42 Media
Shraddha Goled @ Inc42 Media 1 place · today 20:30 EDT

Biotech Startup StrainX Bags $13 Mn To Manufacture Alternative Proteins

Emerging out of stealth mode, biotech startup StrainX Bioworks has raised $13 Mn (around ₹124 Cr) in a funding round… Read more

0 fresh

Inc42 Media
Debarghya Sil @ Inc42 Media 2 place · today 20:30 EDT

Why Swiggy Failed The Shareholder Litmus Test

In October last year, Swiggy CEO Sriharsha Majety called Instamart’s shift to an inventory-led model an eventuality.  That conviction, it… Read more

0 fresh

SlashGear
SlashGear 1 place · today 20:30 EDT

8 Expensive Home Depot Tools Users Say Are Worth Buying

Home Depot is a go-to source for all sorts of expensive power tools, especially when you take the experiences and feedback of other users into account. Read more

0 fresh

Business Insider
Aditi Bharade @ Business Insider 1 place · today 20:01 EDT

I'm a product manager who used Claude to build a postcard business in 4 hours

Priscilla Tina, a product manager in San Francisco, used Claude to create a postcard app. She said it's made her a fun bit of cash on the side. Read more

0 fresh

TechRadar
TechRadar 1 place · today 20:00 EDT

How to watch Rick and Morty season 9 online from anywhere

Portal-jump back into the Morty-verse for a new season of IntergalacRick escapades. Here's how to watch Rick and Morty season 3 online from anywhere. Read more

0 fresh

Business Insider
Amanda Molenaar @ Business Insider 2 place · today 19:45 EDT

I've lived abroad for 8 years, and now too many places feel like home

Amanda Molenaar spent her 20s and 30s largely living abroad. Many of her friends from back home stayed close to where they grew up. Read more

0 fresh

SlashGear
SlashGear 2 place · today 19:45 EDT

5 Celebrities Who Own A Gulfstream IV Private Jet

The Gulfstream IV has been a perennially popular private jet since its introduction in the 1980s, with dozens of celebrities owning one since that time. Read more

0 fresh

GSMArena.com
GSMArena.com 1 place · today 19:02 EDT

Honor 600 vs. 600 Pro

The age-old question - the Pro or the non-Pro? This time it's either the Honor 600 or the Honor 600 Pro. The latter brings a handful of useful features and hardware upgrades over the regular Honor 600, but also adds another €300 to the bill. Sure, you get a more powerful chipset and a telephoto camera, but the vanilla 600 gets you a long way at a much lower cost.... Read more

0 fresh

TechRadar
TechRadar 2 place · today 19:00 EDT

Quordle hints and answers for Monday, May 25 (game #1582)

Looking for Quordle clues? We can help. Plus get the answers to Quordle today and past solutions. Read more

0 fresh

TechRadar
TechRadar 3 place · today 19:00 EDT

NYT Strands hints and answers for Monday, May 25 (game #813)

Looking for NYT Strands answers and hints? Here's all you need to know to solve today's game, including the spangram. Read more

0 fresh

TechRadar
TechRadar · today 19:00 EDT

NYT Connections hints and answers for Monday, May 25 (game #1079)

Looking for NYT Connections answers and hints? Here's all you need to know to solve today's game, plus my commentary on the puzzles. Read more

0 fresh

Digital Trends
Vikhyaat Vivek @ Digital Trends 1 place · today 19:00 EDT

In a market where Mac has been aspirational, it’s somehow a better deal than windows machines now

MacBooks have long been treated as the expensive, aspirational laptop choice, but rising Windows laptop prices and Apple’s cheaper MacBook strategy are flipping this script. Read more

0 fresh

SlashGear
SlashGear 3 place · today 18:45 EDT

This Is Where Your Doorbell Camera's Security Footage Actually Goes

Think you're the only one who can see your front porch? Discover where your smart doorbell actually stores its video and who else might be watching. Read more

0 fresh

SlashGear
SlashGear · today 18:30 EDT

5 Cruiser Motorcycles More Powerful Than A Kawasaki

Kawasaki was once a heavyweight in the cruiser bike category, but its modern lineup isn't nearly as powerful as those made by its competitors. Read more

0 fresh

Habr
select_zvezdo4ka_from @ Habr 1 place · today 18:24 EDT

Когда нейросети перестанут галлюцинировать? И почему на «что за дичь» они несут ещё большую дичь?

Каждый, кто работал с большими языковыми моделями (LLM), знает эту боль. Ты задаёшь вопрос. Бот выдаёт уверенный, красивый, но абсолютно ложный ответ. Ты пишешь: «Что за дичь ты несёшь?» Бот извиняется: «Вы абсолютно правы, вот исправленный вариант». И выдаёт ещё большую дичь, чем в первый раз. Прямо как студент не экзамене.Сегодня разбираемся, почему так происходит, и когда это наконец починят. Спойлер: не скоро и не полностью. Читать далее Read more

0 fresh

The most popular news from the same source for the last week
Habr Habr
Habr
zarazaexe @ Habr · 05/17/2026 22:12 EDT

Я декомпилировал MAX и нашёл там 15 вещей о которых вы бы не хотели знать

Я декомпилировал APK мессенджера MAX и проверил его поведение по коду. нашёл: скрытый SDK деанонимизации с отправкой реального IP в обход VPN на сторонний домен, недокументированную запись аудио со звонков по команде сервера, отключённую проверку TLS-сертификатов в QUIC-канале медиа, серверный C2-канал через WebSocket с командами выгрузки контактов и логов, аппаратный фингерпринт через Widevine DRM, ZipSlip в загрузчике моделей, передачу номера телефона по открытому HTTP, силовое обновление в обход Google P Read more

0

Habr
Shannon @ Habr · 05/17/2026 22:28 EDT

Qwen3.6 MTP весит на 0.3 Гб больше, а даёт ускорение в ~2 раза. С 60 t/s до 130 t/s для Qwen3.6 27B без искажений

В llama.cpp добавили поддержку MTP Qwen3.6. Дополнительные слои Multi-Token Prediction позволяют сгенерировать сразу несколько токенов за 1 проход, что ускоряет генерацию в 1.5-2 раза. Качество при этом остается lossless. Для моделей, которые не имеют встроенного MTP, есть альтернативы в лице EAGLE-3 и DFlash. Читать далее Read more

0

Habr
YH7H22 @ Habr · 05/17/2026 23:44 EDT

Как связывание эмбеддингов душит трансформеры и уничтожает градиенты

Долгие годы в NLP считалось правилом хорошего тона связывать матрицу входных эмбеддингов с матрицей выходного классификатора (Weight Tying), чтобы сэкономить память. В этой статье мы разберем геометрическую ошибку этого подхода. Вы узнаете, почему входные и выходные репрезентации имеют прямо противоположные математические цели, и как общая матрица приводит к физическому столкновению градиентов во время обратного распространения ошибки, лишая модель выразительности. Читать далее Read more

0

Habr
shanker @ Habr · 05/18/2026 00:00 EDT

Wayback Machine как архив IDOR: как временные ссылки перестали быть временными

В марте 2026 многие обсуждали ситуацию с доступом к изображениям из ЛС мессенджера MAX по ссылкам, сохранённым через WebArchive. Тогда же многих не устроил ответ компании.К сожалению, ситуация хуже, чем кажется. Т.к. проблемы не видят не только в MAX, но и в других компаниях (столкнулся с этим, оповещая компании о похожих проблемах). В статье я расскажу, почему считаю ситуацию - проблемой для всех: пользователей, компании, багхантеров. И как связка "WebArchive... Read more

0

Habr
viktdo @ Habr · 05/18/2026 00:03 EDT

GEO для Яндекс Нейро: 4 метрики, которые отвечают на главный вопрос «почему меня нет в выдаче»

Когда в 2023-2024 году Яндекс и Google запустили генеративные ответы поверх поисковой выдачи, классические SEO-метрики начали ломаться по одной. Позиция «1 место в SERP» больше ничего не значит, если 40-70% коммерческих запросов в нише триггерят AI-ответ выше первой ссылки. Click-through rate упал даже у тех, кто формально сохранил топ-3 - AI-ответ перехватывает часть кликов, и появляется новый класс источников: домены, которые AI цитирует в своём ответе. Туда вы либо попадаете... Read more

0

Habr
zzeng @ Habr · 05/18/2026 00:01 EDT

Насколько многомерным может быть многомерный точный индекс?

Вот, например, Milvius(DiskANN) рассчитан на вектора размерности до 32 768, но это приближенный поиск.  Но как насчёт поиска точного?В данной статье рассматривается работоспособность 1024 мерного индекса, хранилищем которого служит обычное B-дерево (насколько вообще может быть обычным такое дерево). Используемый диск - вполне себе “железный” старый добрый WD Purple, оперативная память сознательно ограничена 8 Гб. Можно ли что-то из этого выжать на рядовом десктопе за приемлемое время? Читать далее Read more

0

Habr
Diamant_storage @ Habr · 05/18/2026 00:35 EDT

Иллюзия сохранности, или Бэкап, который не спасает

Случай, произошедший со стартапом PocketOS, выглядел бы комичным, если бы не обернулся реальной катастрофой. ИИ-агент Cursor, работавший на базе Claude Opus, за девять секунд уничтожил не только основную базу данных компании, но и все резервные копии. Читать далее Read more

0

Habr
RationalAnswer @ Habr · 05/18/2026 00:50 EDT

Китае-американский визит десятилетия, а также первый коммерческий пилотируемый меха-робот

Самые интересные новости финансов и технологий в России и мире за неделю: встреча Трампа и Си, новый глава ФРС заступил на должность, первое крупное ИИ-IPO Cerebras, на бирже обещают сделать фьючерсы на компьют, экономика РФ замедляется, мессенджер Max хочет заменить банковские SMS, айтишники в западных компаниях жгут токены почем зря, а также хорошая новость недели для всех скуфов. Читать далее Read more

0

Habr
DimaIam (StudyAI) @ Habr · 05/18/2026 01:00 EDT

Как люди использовали биометрию до компьютеров?

Невероятно, но факт: человек понимал, что части нашего тела несут уникальную биометрическую сигнатуру еще когда эпос о Гильгамеше был самым популярным “шлягером” на вавилонских свадьбах и пирах. Читать далее Read more

0

Habr
cyberscoper @ Habr · 05/18/2026 01:40 EDT

8 PoPs по миру за €46/мес: реальная экономика pet privacy-DNS в цифрах

Я полгода в одиночку пилю VantageDNS, privacy-focused recursive DNS с фильтрацией. Аналог NextDNS, юрисдикция EU. Ниже честный построчный разбор того, во что мне на самом деле обходится сеть из 8 нод по миру и контрол-плейн. Не маркетинговое «около ста евро», а реальная цифра, которая каждый месяц списывается с карты: €46.27.В конце таблица расходов и прикидка, сколько платных юзеров надо, чтобы это перестало быть хобби. Показать счёт Read more

0

Most popular sources

  • You see 303 news out of 303.
  • Sources 61 out of 61.
The Fintech Times 0%
ScienceDaily 0%
Ars Technica 0%
Vox 0%
Android Authority 0%
View sources »

LIKE us on Facebook so you won't miss the most important news of the day!

24.05.2026 20:57
Last update: 20:50 EDT.
News rating updated: 03:50.

What is Times42?

Times42 brings you the most popular news from tech news portals in real-time chart.
Read about us in FAQ section.


Times42 © 2026