Книга: «Контракты данных. Разработка конвейеров продакшен-уровня»

Моя цель - предложение широкого ассортимента товаров и услуг на постоянно высоком качестве обслуживания по самым выгодным ценам.

Привет, Хаброжители!

Контракты данных — это архитектурный паттерн, с помощью которого заключаются соглашения между производителями и потребителями данных. Они являются частью более масштабного подхода под названием сдвиг влево (shift left), в рамках которого вы используете автоматизацию, чтобы разработчики программного приложения или продукта обеспечили необходимые меры контроля, специфичные для их домена. Этот подход был впервые утвержден в рамках методологий DevOps и DevSecOps.

В книге представлена архитектура контрактов данных, дается их четкое определение, объясняется, почему индустрия в них нуждается, и приводятся реальные примеры использования контрактов в продакшене. Вы узнаете, как внедрять компоненты этой архитектуры и как они используются на всех этапах жизненного цикла данных в компании.

Цель книги — стать практическим руководством по выявлению проблем, которые приводят к необходимости использования контрактов данных, их внедрению и привлечению внимания высшего руководства и масштабированию внедрения на уровне всей организации.

Что внутри?

  • Примеры использования контрактов данных.

  • Решение проблемы качества данных с помощью архитектуры контрактов.

  • Оценка эффекта от внедрения контрактов для бизнеса.

  • Стратегия использования контрактов данных в своей компании.

Какую проблему решает?

Разработчики меняют код у себя, а дата-инженеры и аналитики узнают об этом случайно. Контракты данных решают эту проблему, фиксируя требования к данным в виде кода и автоматически проверяя их в CI/CD до попадания изменений в продакшен.

Для кого книга?

Книга предназначена для специалистов по данным и разработчиков, желающих разобраться в том, как устранить хаос в слое данных и автоматизировать контроль их качества прямо в процессах CI/CD.

Об авторах
Чед Сандерсон

Эксперт по контрактам данных, генеральный директор и соучредитель компании Gable. Много пишет о качестве данных, ведет рассылку Data Products, основал сообщество Data Quality Camp. Живет в Сиэтле.

Марк Фримен

Инженер данных, общественный деятель в области здравоохранения, использует данные для решения социальных проблем. Окончил магистратуру Стэнфордского медицинского университета.

Б. Э. Шмидт

Креативный директор и писатель с двадцатилетним опытом работы в рекламе, контент-маркетинге и digital-стратегиях.

Ознакомиться с оглавлением
Полистать отрывок

Приобрести книгу «Контракты данных. Разработка конвейеров продакшен-уровня» можно на нашем сайте.

При покупке бумажного издания на сайте piter.com электронная книга высылается в подарок на ваш e-mail.

Для Хаброжителей действует скидка 25% по промокоду — DATACONTRACTS

Источник: https://habr.com/ru/companies/piter/articles/1093456/


Интересные статьи

Интересные статьи

Управление hardware-проектами редко похоже на классический IT-менеджмент. Здесь нельзя бесконечно двигать сроки, спокойно менять требования по ходу и рассчитывать, что ошибку получится быстро исправит...
Забегая вперёд, сразу скажу, через API - никак. Но есть возможность его обойти.С чего всё началосьПрижало мне, значит, в рамках одного корпоративного проекта сделать возможность в Bitrix24 массово доб...
После выступления на PgConf2023 у меня на выходных появилось время на реализацию идеи, как реализовать логику конечного автомата на SQL в PostgreSQL. Идея применима к любой СУБД, поддерживающей агрега...
Маркетплейс – это сервис от 1С-Битрикс, который позволяет разработчикам делиться своими решениями с широкой аудиторией, состоящей из клиентов и других разработчиков.
Привет, друзья! Меня зовут Петр, я представитель малого белорусского бизнеса со штатом чуть более 20 сотрудников. В данной статье хочу поделиться негативным опытом покупки 1С-Битрикс. ...