Что такое миграция данных и как понять, что можно перенести из сервиса А в сервис Б, а что - нельзя?

1. Что такое миграция: возможные проблемы в процессе и их решение

Для начала разберемся, что означает термин миграция.

Если говорить простыми словами, то это разовый перенос всех необходимых данных из одного сервиса в другой, сопровождаемый высокой нагрузкой по API-вызовам.

Перенос записей телефонных звонков из одного Битрикс24 в другой с привязкой к сущностям CRM: читайте в нашем блоге.

Допустим в вашей компании долго работали в одной из CRM, но в какой-то момент решили использовать другую.

Это может быть вызвано, например, необходимостью перехода на отечественные платформы (из Jira в Битрикс24).

Или же потребовалось перенести данные из таблиц Гугл в Битрикс24 (это тоже считается миграцией).

Перенос пользователей из одного портала Битрикс24 в другой с миграцией данных их профиля: кейс по ссылке.

Любой из этих процессов предполагает выгрузку определенного объема данных (иногда довольно внушительного) с платформы А на платформу Б, выполнить которую нужно автоматически.

Исключить ручной труд для переноса данных можно, если выполнить миграцию с помощью платформы Пинкит.

Для этого потребуется выполнить следующие действия:

1.1. Определить сущности, которые необходимо перенести.

1.2. Добавить авторизации сервисов А и Б, а если их не будет в списке, то добавить с помощью Пинкитбилдер

1.3. Также через Пинкитбилдер добавить для сущностей соответствующие события на первом и третьем шагах настройки интеграции.

1.4. Сопоставить данные для сохранения корректных связей между ними.

Интеграция Битрикс24-Битрикс24: миграция задач и комментариев с отправкой уведомлений в Телеграм об ошибке по ссылке.

Основная проблема миграции связана с нагрузкой.

Стандартная тарификация Пинкит предусматривает 1 миллион API-вызовов в год. Этот лимит можно использовать либо на одну высоконагруженную интеграцию, либо на несколько менее нагруженных.

Проблема заключается в том, что пользователи часто не могут точно знать, сколько запросов будет генерировать интеграция.

В процессе миграции могут возникнуть дополнительные шаги (фильтрация данных, настройка сопоставления полей и другие действия), которые увеличивают количество запросов.

Если вы планируете миграцию, но не знаете, как считаются API-вызовы в интеграциях, читайте нашу статью-ликбез о подсчете запросов на примере выгрузки дела из одного Битрикс24 в другой здесь.

В ряде случаев миллиона вызовов оказывается недостаточно.

Ранее мы переводили таких клиентов на тариф Энтерпрайз, где инфраструктура поддерживает неограниченное количество API-запросов для любых интеграций.

Однако подобное решение подходит не всем.

Переезд Битрикс24 из облака в коробку через API: читайте инструкцию по ссылке.

В декабре этого года мы получили множество запросов по миграции от клиентов и поняли, что необходимо расширить возможности тарифа Корпорация в рамках декабрьской акции на Пинкит.

Теперь подробнее о настройке интеграций для миграции на примере переезда между Битрикс24.

2. Как настроить миграцию из сервиса А в сервис Б через Пинкит: акция до конца года

Давайте разберем самые частые вопросы о миграции через Пинкит.

2.1. Как убедиться, что все данные будут перенесены корректно? Нужно ли для этого приобретать Пинкит?

Для проверки корректности переноса данных можно сделать пилотную интеграцию, например, перенести только часть сущностей.

В этом случае Пинкит не обязателен. Подробнее о пилотной интеграции читайте тут.

2.2. Как настроить миграцию, если у меня нет инженерных навыков?

У нас есть подробные инструкции по настройке, например, в этой статье.

Также можно обратиться к нашим инженерам, которые настроят миграцию в рамках бонусных часов техподдержки, предоставляемых продакт-менеджером.

2.3. Сколько времени в среднем занимает настройка миграции?

В среднем процесс занимает около 30 часов, но точное время зависит от особенностей настройки.

Например, могут возникнуть несоответствия в форматах полей.

Если в сервисе А поле имеет формат "строка", а в сервисе B — "список", его нужно будет преобразовать.

Это требует дополнительной настройки специальным инструментом на втором шаге:

Обычно для таких случаев используется инструмент преобразования массива данных в Пинкит, что увеличивает количество API-запросов и, соответственно, время на настройку.

Могут также понадобиться дополнительные пользовательские сопоставления на этапе 4 для корректного переноса значений полей.

2.4. Что делать, если кроме миграции нужны интеграции с другими сервисами (hh.ru, МойСклад, Контур, Авито и т.д.)?

Для таких интеграций можно использовать доступные API-запросы, которые включены в коммерческие тарифы Пинкит.

Миграцию можно выполнить параллельно, причем в декабре для этой задачи предоставляется безлимитное количество вызовов.

3. Резюмируем

Если вы планируете переезд с одного сервиса на другой или уже начали миграцию данных вручную, присоединяйтесь к нашей декабрьской акции.

До конца 2024 года вы получите безлимит на API-вызовы для задач миграции (облако-коробка, облако-облако, коробка-облако, коробка-коробка).

Для миграции не потребуется переход на более дорогой тариф, даже если миллиона вызовов будет недостаточно.

Миграция будет осуществляться без ограничений по количеству запросов, а для остальных операций — в пределах миллиона вызовов согласно тарифу «Корпорация».

Остались вопросы? Спросите у нас в Телеграм или WhatsApp.

Если вам нужна миграция из сервиса, которого в Пинкит нет, то через Пинкитбилдер вы можете добавить авторизацию, необходимые события и действия для настройки миграции из вашей платформы в Битрикс24/amoCRM.

Протестируйте Пинкит, зарегистрировавшись в личном кабинете по ссылке: https://lk.pinkit.io/register.

Алексей Окара,
продакт-менеджер Пинкит