Полный текст
Как Notion проектировал свой data lake, чтобы успевать за быстрым ростомЗа последние три года размер данных Notion увеличился в 10 раз из‑за роста количества пользователей и объёмов контента, с которым они работают. Удвоение этого показателя происходило каждые 6-12 месяцев. Разработчикам нужно было справиться со стремительным ростом размеров данных, соответствуя при этом постоянно растущим требованиям, которые выдвигали критически важные сценарии использования продуктов и аналитических систем. Особенно это справедливо в применении к новым функциям Notion AI. Для того чтобы решить эти задачи нужно было создать озеро данных Notion и обеспечить его масштабирование. Узнаем, как это было сделано.