Вопросы по теме 'impala'
Копировать паркетную таблицу между кластерами CDH
Мне нужно скопировать таблицу паркета из кластера CDH4.5 в кластер CDH4.3, для этого:
использовал distcp для копирования каталога с данными (/user/hive/warehouse/mytable)
сравнил размеры каталогов
фиксированные разрешения и права...
1043 просмотров
schedule
11.12.2023
Возврат оператора Load Impala?
Я создал таблицу на Impala и загрузил данные в таблицу.
Теперь данные из HDFS перемещаются в каталог данных Impala, как я могу найти эти данные в HDFS??
33 просмотров
schedule
05.12.2023
Impala - ошибка файла не найдена
Я использую impala с Flume в качестве файлового потока.
Проблема в том, что Flume добавляет временные файлы с расширением .tmp, а затем, когда они удаляются, запросы impala завершаются со следующим сообщением:
Серверная часть 0: не удалось...
1634 просмотров
schedule
02.07.2022
Как установить конфигурацию в файле Hive-Site.xml для подключения к хранилищу метаданных куста?
Я хочу подключить MetaStore с помощью java-кода. Я понятия не имею, как установить параметры конфигурации в файле Hive-Site.xml и куда я отправлю файл Hive-Site.xml. Пожалуйста помоги.
import java.sql.Connection;
import java.sql.DriverManager;...
27507 просмотров
schedule
31.08.2022
Проблема с импортом даты из Oracle в Hive с использованием sqoop
Я пытаюсь импортировать данные из Oracle в куст. В Oracle есть столбец «LOAD_DATE», а его значения имеют формат «13.08.2015 2:55:17 AM». После импорта я получаю значение вроде «2015-08-13 02: 55: 17.0». «AM» отсутствует в импортированных данных....
2573 просмотров
schedule
27.11.2023
C ++ - Передача строкового значения функции с использованием указателя uint8_t
Я изучаю C ++, чтобы создать настраиваемую функцию (определяемая пользователем функция - это то, как ее называет cloudera), которую я хочу использовать в Hadoop Cloudera Impala SQL. Cloudera предоставила файл заголовка, в котором есть определения...
1603 просмотров
schedule
26.09.2022
Impala: как создать материализованное представление в impala?
Можем ли мы создавать материализованные представления в Impala? Если нет, то какое альтернативное решение для лучшей производительности просмотра.
2478 просмотров
schedule
14.08.2022
Impala GROUP BY секционированный столбец
Теоретический вопрос,
Допустим, у меня есть таблица с четырьмя столбцами: A, B, C, D. Значения A и D равны, таблица разбита по столбцу A.
С точки зрения производительности, будет ли разница, если я выполню этот запрос SELECT SUM (B) GROUP BY A;...
103 просмотров
schedule
18.05.2024
как узнать когда выйдет cdh 5.10
Кто-нибудь знает, как найти дорожную карту Cloudera для выпусков всех сервисов и компонентов для CDH? Я вижу здесь https://www.cloudera.com/documentation/enterprise/release-notes/topics/impala_incompatible_changes.html#incompatible_changes_28x...
572 просмотров
schedule
23.05.2024
Реализация мультитенантности с Apache Kudu
Я реализую систему больших данных с использованием apache Kudu. Предварительные требования заключаются в следующем:
Поддержка мультитенантности
Внешний интерфейс будет использовать драйверы Apache Impala JDBC для доступа к данным.
Клиенты...
377 просмотров
schedule
21.04.2024
Идентификация разделителя символов в Hive
Ниже приведены мои данные с разделителем шип þ
1+Naveenþ "Бангалор", "Карнатака"þ
2þNaveenþ"Srikanth ^ Karnatakaþ562114
Оператор создания таблицы ниже
CREATE External TABLE adh_dev.delimiter_test (Number INT, Name STRING,
Address string...
378 просмотров
schedule
21.11.2023
Impala: установите постоянную дату для метки времени
есть ли альтернатива функции to_char() в импале? Я хочу установить поле метки времени, в котором дата и минуты фиксированы и показывают только часы, но не могу найти альтернативу.
Это мой существующий код в postgres, который мне нужно...
89 просмотров
schedule
26.03.2024
Как преобразовать эту строку в метку времени
у меня есть столбец с такими данными "08.06.2017/10:20:46". Тип данных — строка. я хочу преобразовать его в метку времени. я попробовал CAST("08.06.2017/10:20:46" AS TIMESTAMP), но это не работает. Не могли бы вы помочь мне преобразовать его??...
43387 просмотров
schedule
08.11.2023
Написать цикл while в Impala SQL?
Каков синтаксис для написания цикла while в Impala? Можно ли вообще написать цикл? Кажется, я не могу объявлять переменные, и он не распознает «пока» как ключевое слово.
3514 просмотров
schedule
01.04.2024
Обходной путь для запроса столбца массива в виде строк в Impala
В Hive я могу использовать функцию explode , но как это сделать в Impala?
Прочитал, но так и не понял:
Есть ли функция, эквивалентная Hive's ' взорвать" в Apache Impala?
Вот как я создал таблицу в Hive:
create table tb (arr_col...
6781 просмотров
schedule
13.03.2024
Impala find_in_set для соответствия LIKE со знаком процента
Есть ли способ сопоставить zz-10% с find_in_set ?
Например:
select find_in_set('zz-1000','zz-10%,zz-2000,zz-3000');
Это должно вернуть 1 , но Impala его не поддерживает. Мне интересно, есть ли какой-нибудь трюк с Regex для обхода?...
1572 просмотров
schedule
04.02.2024
Написание больших скриптов в Impala
Мне нужно перевести длинные сценарии Teradata (длиной 10 000 строк) в Impala. Я никогда не делал этого раньше с Импалой.
Инструменты, с которыми мне приходится работать, — это impala shell или hue.
Я не видел примера кода Impala длиной более 50...
108 просмотров
schedule
17.08.2022
Создать параметризованное представление в Impala
Моя цель — создать параметризованное представление в Impala, чтобы пользователи могли легко изменять значения в запросе. Если я запускаю запрос ниже, например, в HUE, можно ввести значение.
SELECT * FROM customers WHERE customer_id = ${id}
Но...
966 просмотров
schedule
25.09.2022
Как заменить ключи, хранящиеся в строке, значениями, хранящимися в другой таблице в Impala
У меня есть таблица Impala, в которой хранятся ключи в виде строк, есть схема этой таблицы:
CREATE TABLE user_actions_t
(
`useractionid` BIGINT,
`streamid` VARCHAR,
PRIMARY KEY(useractionid)
)
PARTITION BY HASH PARTITIONS 16...
64 просмотров
schedule
30.03.2024
Двойные значения Impala не загружаются правильно
Я создал простую таблицу в импале, как показано ниже.
CREATE TABLE IF NOT EXISTS my_db.employee
(name STRING, salary double );
И мой оператор вставки, как показано ниже
insert into employee (name, salary)
VALUES ("Prasad",...
257 просмотров
schedule
06.08.2022
