Публикации по теме 'data-migration'


Рекомендации по проектированию приложений для сегментирования баз данных большого объема
Трипти Шастри , Джей Патель , Амит Атавале и Шрилата Конеру PayPal засвидетельствовал впечатляющий рост количества клиентов и объемов обработки транзакций за последнее десятилетие. По мере того, как мы продолжаем совершенствовать наш технологический стек и мобильный опыт, мы решаем несколько проблем. Масштабирование нашей пользовательской базы данных (db) - одна из таких проблем, которая усугубляется из-за нашей монолитной кодовой базы. База данных пользователей использует в своей..

14 Правила записи миграции данных
В течение всего жизненного цикла программного проекта нам время от времени требуется вносить серьезные изменения, которые могут вынудить нас изменить нашу базу данных в соответствии с нашим новым поведением. В большинстве случаев наши изменения будут включать в себя простые миграции схемы, такие как добавление новой таблицы, столбца или индекса, но иногда нам действительно нужно перенести сами данные. Миграция данных может потребоваться по многим причинам. Изменения в бизнес-логике..

Перенести или не перенести данные? [Видео]
Перенести или не перенести данные? [Видео] Я поделился своими выводами о процессе переноса данных на мероприятии Selleo Haxorz , которое проводилось в октябре 2016 года . Целью было перенести данные из устаревшей системы в новейшую версию системы без потери данных. В целом, мы разделили процесс на 10 этапов на 3 группы: 1. Подготовка Сбор информации (текущий статус) Планирование 2. Развитие Создание инструмента Документируйте процесс Упростите данные, ищите место,..

Вопросы по теме 'data-migration'

Перенос базы данных (SQLite) из одного приложения rails в другое
В настоящее время у меня есть система, в которой у одного рельса 2.3.2 есть база данных со всеми данными моего контента. С тех пор я создал другое приложение, которое использует rails 3.1 и очень похоже, но с некоторыми дополнительными функциями...
298 просмотров

Как обновить столбец TIMESTAMP до TIMESTAMP WITH TIME ZONE в Oracle
У меня есть пара столбцов, которые, к сожалению, были неправильно определены как TIMESTAMP(6) вместо TIMESTAMP(6) WITH TIME ZONE . Я хотел бы перенести эти столбцы из старого, неправильного типа данных в новый, правильный. Кроме того, значения,...
9684 просмотров

Загрузка исходных данных с помощью Django 1.7 и миграции данных
Недавно я перешел с Django 1.6 на 1.7 и начал использовать миграции (я никогда не использовал South). До версии 1.7 я загружал исходные данные с помощью файла fixture/initial_data.json , который загружался с помощью команды python manage.py...
39024 просмотров
schedule 07.07.2022

Ora2Pg не работает должным образом
Я использую ora2pg для переноса данных из оракула в базу данных postgres. В качестве первого шага я экспортирую схему. Я обнаружил, что сгенерированный файл sql имеет много ошибок, таких как повторяющиеся операторы sql, повторяющиеся параметры в...
1366 просмотров
schedule 14.04.2024

MySQL / PHPMyAdmin
Недавно я приобрел сайт WordPress у другой компании-разработчика. Сайт крайне нестабилен и не обеспечивает то, что нужно клиенту. Итак, в настоящее время я пытаюсь экспортировать сайт оптом на один из серверов нашей компании. Многочисленные...
128 просмотров

Выберите «Вставить запрос», указав все столбцы в базах данных.
Я работаю над перепроектированием устаревшей базы данных и установил новые имена для столбцов старой базы данных. Так, например, если olddb.oldtable под dbold имеет столбец descr , я установил его как description в новом столбце newdb.netable...
113 просмотров
schedule 26.01.2024

понижение версии базы данных sql
У меня есть база данных в MS SQL 2014. Мне нужно перенести данные с этого сервера на сервер MS SQL 2012. У меня размер базы данных около 10 ГБ. Я пробовал резервное копирование/восстановление, присоединение/отсоединение, экспорт/импорт и создание...
57 просмотров
schedule 28.07.2022

Удаленная переиндексация Elasticsearch с 1.x на 5.x _timestamp
Об этом был пост, но ответов не было. У меня есть старый индекс в ES 1.x, который я хочу перенести на 5.x. В исходных документах включено поле _timestamp. Я использую API удаленного переиндексирования и мне нужно перенести поле _timestamp. Не...
192 просмотров
schedule 17.02.2024

Относительно выполнения задач потока данных в определенном порядке в службах SSIS
Я создал 4 задачи потока данных , как показано на изображении, в каком порядке я хочу, чтобы они выполнялись: Клиенты Места Заказы Предметы Каждый поток задач данных состоит из: Источник данных плоского файла Конверсия...
848 просмотров

Перенос тем, ACL и сообщений с apache kafka на объединенную платформу
Мы переносим наше приложение с Apache Kafka на Confluent Platform. Версия Apache Kafka: 1.1.0 Конфлюэнт: 4.1.0 Пробовал эти варианты: Копирование журналов zookeeper и журналов Kafka вручную - не лучший способ из-за объема и...
143 просмотров

Как сгенерировать временные метки/дату и время createdAt и updatedAt с помощью CodeIgniter DB Forge?
Я хотел бы иметь 2 поля timestamp/datetime, createdAt , которые содержат только время создания записи, но не обновляются постоянно, если в записи есть обновления, и updatedAt который генерируется во время создания записи и каждый раз, когда запись...
158 просмотров
schedule 21.09.2022

Как указать несколько столбцов для инкрементных данных в Sqoop?
Я использую следующий запрос для получения дополнительных данных в sqoop- bin/sqoop job --create JOB_NAME -- import --connect jdbc:oracle:thin:/system@HOST:PORT:ORACLE_SERVICE --username USERNAME --password-file /PASSWORD_FILE.txt...
292 просмотров
schedule 04.01.2024