Публикации по теме 'data-migration'
Рекомендации по проектированию приложений для сегментирования баз данных большого объема
Трипти Шастри , Джей Патель , Амит Атавале и Шрилата Конеру
PayPal засвидетельствовал впечатляющий рост количества клиентов и объемов обработки транзакций за последнее десятилетие. По мере того, как мы продолжаем совершенствовать наш технологический стек и мобильный опыт, мы решаем несколько проблем. Масштабирование нашей пользовательской базы данных (db) - одна из таких проблем, которая усугубляется из-за нашей монолитной кодовой базы. База данных пользователей использует в своей..
14 Правила записи миграции данных
В течение всего жизненного цикла программного проекта нам время от времени требуется вносить серьезные изменения, которые могут вынудить нас изменить нашу базу данных в соответствии с нашим новым поведением.
В большинстве случаев наши изменения будут включать в себя простые миграции схемы, такие как добавление новой таблицы, столбца или индекса, но иногда нам действительно нужно перенести сами данные.
Миграция данных может потребоваться по многим причинам. Изменения в бизнес-логике..
Перенести или не перенести данные? [Видео]
Перенести или не перенести данные? [Видео]
Я поделился своими выводами о процессе переноса данных на мероприятии Selleo Haxorz , которое проводилось в октябре 2016 года .
Целью было перенести данные из устаревшей системы в новейшую версию системы без потери данных.
В целом, мы разделили процесс на 10 этапов на 3 группы:
1. Подготовка
Сбор информации (текущий статус) Планирование
2. Развитие
Создание инструмента Документируйте процесс Упростите данные, ищите место,..
Вопросы по теме 'data-migration'
Перенос базы данных (SQLite) из одного приложения rails в другое
В настоящее время у меня есть система, в которой у одного рельса 2.3.2 есть база данных со всеми данными моего контента. С тех пор я создал другое приложение, которое использует rails 3.1 и очень похоже, но с некоторыми дополнительными функциями...
298 просмотров
schedule
27.11.2023
Как обновить столбец TIMESTAMP до TIMESTAMP WITH TIME ZONE в Oracle
У меня есть пара столбцов, которые, к сожалению, были неправильно определены как TIMESTAMP(6) вместо TIMESTAMP(6) WITH TIME ZONE . Я хотел бы перенести эти столбцы из старого, неправильного типа данных в новый, правильный. Кроме того, значения,...
9684 просмотров
schedule
29.07.2022
Загрузка исходных данных с помощью Django 1.7 и миграции данных
Недавно я перешел с Django 1.6 на 1.7 и начал использовать миграции (я никогда не использовал South).
До версии 1.7 я загружал исходные данные с помощью файла fixture/initial_data.json , который загружался с помощью команды python manage.py...
39024 просмотров
schedule
07.07.2022
Ora2Pg не работает должным образом
Я использую ora2pg для переноса данных из оракула в базу данных postgres. В качестве первого шага я экспортирую схему. Я обнаружил, что сгенерированный файл sql имеет много ошибок, таких как повторяющиеся операторы sql, повторяющиеся параметры в...
1366 просмотров
schedule
14.04.2024
MySQL / PHPMyAdmin
Недавно я приобрел сайт WordPress у другой компании-разработчика. Сайт крайне нестабилен и не обеспечивает то, что нужно клиенту. Итак, в настоящее время я пытаюсь экспортировать сайт оптом на один из серверов нашей компании.
Многочисленные...
128 просмотров
schedule
17.08.2022
Выберите «Вставить запрос», указав все столбцы в базах данных.
Я работаю над перепроектированием устаревшей базы данных и установил новые имена для столбцов старой базы данных. Так, например, если olddb.oldtable под dbold имеет столбец descr , я установил его как description в новом столбце newdb.netable...
113 просмотров
schedule
26.01.2024
понижение версии базы данных sql
У меня есть база данных в MS SQL 2014. Мне нужно перенести данные с этого сервера на сервер MS SQL 2012. У меня размер базы данных около 10 ГБ. Я пробовал резервное копирование/восстановление, присоединение/отсоединение, экспорт/импорт и создание...
57 просмотров
schedule
28.07.2022
Удаленная переиндексация Elasticsearch с 1.x на 5.x _timestamp
Об этом был пост, но ответов не было. У меня есть старый индекс в ES 1.x, который я хочу перенести на 5.x. В исходных документах включено поле _timestamp. Я использую API удаленного переиндексирования и мне нужно перенести поле _timestamp. Не...
192 просмотров
schedule
17.02.2024
Относительно выполнения задач потока данных в определенном порядке в службах SSIS
Я создал 4 задачи потока данных , как показано на изображении, в каком порядке я хочу, чтобы они выполнялись:
Клиенты
Места
Заказы
Предметы
Каждый поток задач данных состоит из:
Источник данных плоского файла
Конверсия...
848 просмотров
schedule
05.05.2024
Перенос тем, ACL и сообщений с apache kafka на объединенную платформу
Мы переносим наше приложение с Apache Kafka на Confluent Platform.
Версия Apache Kafka: 1.1.0
Конфлюэнт: 4.1.0
Пробовал эти варианты:
Копирование журналов zookeeper и журналов Kafka вручную - не лучший способ из-за объема и...
143 просмотров
schedule
18.11.2023
Как сгенерировать временные метки/дату и время createdAt и updatedAt с помощью CodeIgniter DB Forge?
Я хотел бы иметь 2 поля timestamp/datetime, createdAt , которые содержат только время создания записи, но не обновляются постоянно, если в записи есть обновления, и updatedAt который генерируется во время создания записи и каждый раз, когда запись...
158 просмотров
schedule
21.09.2022
Как указать несколько столбцов для инкрементных данных в Sqoop?
Я использую следующий запрос для получения дополнительных данных в sqoop-
bin/sqoop job --create JOB_NAME -- import --connect jdbc:oracle:thin:/system@HOST:PORT:ORACLE_SERVICE --username USERNAME --password-file /PASSWORD_FILE.txt...
292 просмотров
schedule
04.01.2024