Вопросы по теме 'bulkinsert'

Массовая вставка файла с текстовым полем с возвратом каретки (ввод)
У меня возникли проблемы с массовой вставкой файла, который содержит поле в текстовом типе данных, и он содержит ввод, а разделитель для полей - это каналы "|" и конец строки "|\n" Я получаю ошибку усечения для полей рядом с текстовым полем. Я...
9544 просмотров
schedule 14.04.2024

Оптимизация вставок MySQL для обработки потока данных
Я использую поток данных с высокой скоростью и делаю следующие шаги для хранения данных в базе данных MySQL. За каждый новый поступающий товар. (1) Разобрать входящий элемент. (2) Выполните несколько «ВСТАВИТЬ... НА ОБНОВЛЕНИИ ДУБЛИКАЦИИ...
4544 просмотров
schedule 29.10.2022

Вставка больших пакетов: как получить SQL-код INSERT из Grails?
У меня было много проблем с большими пакетами вставок в Grails. Я пробовал все наиболее распространенные обходные пути, предложенные пользователями (такие как WithTransaction и т. д.), и вставки все еще были смехотворно медленными. У меня есть...
2404 просмотров
schedule 29.02.2024

как правильно импортировать большие наборы данных в mysql?
У меня есть файл *.sql размером 400 МБ, который представляет собой дамп из базы данных MySQL. Теперь я хочу импортировать это в новую базу данных. Я использовал phpmyadmin, но он ломается через несколько минут, потому что не может обрабатывать такой...
1989 просмотров
schedule 20.04.2024

Массовая вставка из выбранного
У меня есть текстовый файл, содержащий около 300 миллионов строк. Я делаю массовую вставку, чтобы поместить файл в промежуточную таблицу в sql. Затем я разбиваю несколько столбцов, чтобы нормализовать их, что работает хорошо и быстро. Последний...
6752 просмотров
schedule 28.09.2022

Ошибка массовой загрузки в Netbeans.
Я знаю, что это старая ошибка. Я искал везде, но все еще не мог найти решение. Stackoverflow - мое последнее средство. Вот что я делаю. Я пытаюсь импортировать текстовый файл через java в SQL Server 2008. Код, который я написал для выполнения...
153 просмотров
schedule 11.01.2024

Можно ли вызывать finish() сразу после вызова методов Provider?
Настройка: FirstActivity открывает SecondActivity, SecondActivity просит пользователя выбрать изображения, дать им названия; когда пользователь закончит, он нажимает кнопку «Сохранить», которая вызывает метод saveToDatabase, который вызывает массовую...
163 просмотров

Одна вставка против нескольких вставок
Я повторяю (двоичный) файл и вставляю некоторые значения в таблицу. После получения значений я вставляю их построчно в базу данных. Часть моего кода (примеры значений): string sColumn1 = Getcolumn1Value(); string sColumn2 = Getcolumn2Value();...
115 просмотров
schedule 13.05.2024

МАССОВАЯ ВСТАВКА или мастер импорта и экспорта данных?
У меня есть большой еженедельный файл CSV (от 500 МБ до 1 ГБ с более чем 2,5 миллионами строк), который нужно загрузить в базу данных SQL Server 2008 R2. Я смог использовать либо команду BULK INSERT, либо мастер импорта и экспорта данных для...
4413 просмотров

SQL Server BULK INSERT более 1 миллиона строк — требуется повышение производительности
Мне поручили разработать метод импорта текстовых файлов с 1 миллионом и более строк в таблицу. Каждая строка в таблице составляет 856 байт, разделенных примерно на 150 «столбцов» данных. Я использую стандартную версию SQL Server 2012. Действия,...
2988 просмотров

Массовая вставка из общей папки
У меня есть общая папка на сервере A с разрешениями. и я пытаюсь использовать массовую вставку с сервера B . Я также добавил сетевое расположение к серверу «B» с помощью «A» (пытаюсь использовать локальный путь - но ничего). при использовании...
1754 просмотров

ContentProvider пуст после массовой вставки
Я не первый раз создаю ContentProviders. Но я впервые сталкиваюсь с этой проблемой и не знаю, что делать, чтобы решить ее. Я делаю массовую вставку, которая возвращает количество 4. Затем сразу же делаю запрос для всего, и запрос возвращает...
262 просмотров

SQL bulkinsert с использованием пробела в качестве разделителя
У меня есть вопрос, и я не могу понять, возможно ли это вообще. У меня есть файл .txt, который я хочу загрузить на сервер Sql, и он выглядит так: 40774529655 Active 2015-12-25 06:12:42 0 Open...
281 просмотров
schedule 18.10.2022

Ошибка BULK INSERT с неизвестной причиной
Я пытаюсь ОБЪЕМОМ вставить довольно широкий (220 столбцов) набор данных в таблицу SQL Server 2016, используя следующее: BULK INSERT dbo.[table] FROM 'C:\source.txt' WITH ( FIELDTERMINATOR = ',', ROWTERMINATOR = '0x0A' ); С самого...
859 просмотров

Объемная вставка Laravel с отношением один к одному
Я знаю, что могу вставить несколько записей в laravel с помощью: $data = [ ['name' => '...', 'age' => ...], ['name' => '...', 'age' => ...], ['name' => '...', 'age' => ...], ]; Model::insert($data); Но можно ли...
487 просмотров
schedule 25.08.2022

Массовая вставка столбца столбца MariaDb
У меня есть код, который я пишу, который использует массовую вставку и выглядит примерно так: ColumnStoreBulkInsert b = d.createBulkInsert("pst", "events", (short) 0, 0); try { for (Map<String, Object> record : records) {...
93 просмотров
schedule 05.01.2024

как динамически вставлять несколько строк в гаечный ключ Google Cloud
В приведенном ниже фрагменте кода вставка нескольких строк со статическими значениями. Как мне динамически вставить несколько строк в базу данных гаечного ключа за одну транзакцию? function writeUsingDml(instanceId, databaseId, projectId) {...
890 просмотров

Пакетная/массовая обработка сообщений (JMS) с помощью Wildfly
У меня есть очередь JMS, которая заполняется некоторыми данными временных рядов. Чтобы предотвратить тысячи вставок SQL с одной транзакцией, я хочу обрабатывать их громоздким способом, а не способом MessageListener onMessage "на сообщение"....
378 просмотров
schedule 29.01.2024

Почему «activerecord-import» не выполняет массовую вставку?
После тестирования библиотеки activerecord-import для массовой вставки я обнаружил, что она не выполняет одну огромную INSERT но много мелких INSERTs Xml.import( insert_values, ignore: true, validate: false, batch_size: 1000 ) #...
272 просмотров

Как получить в ответ от Elasticsearch Java High-Level Client 6.8 только неудачные документы
Есть ли способ получить в ответе только неудавшиеся документы при массовом запросе с использованием Elasticsearch Java High-Level REST Client. В настоящее время ES отправляет в ответ все успешные и неудачные документы, и мы повторно обрабатываем...
284 просмотров