Клиент Hbase не может подключиться к удаленному серверу Hbase

Эта проблема возникает из-за файла hosts вашего сервера HBase.
Вам просто нужно отредактировать файл /etc/hosts вашего сервера HBase.
Удалите запись localhost из этого файла и поместите запись localhost перед IP-адресом сервера HBase.

Например, файлы /etc/hosts вашего сервера HBase выглядят так:

127.0.0.1 localhost
192.166.66.66 xyz.hbase.com hbase

Вы должны изменить его следующим образом, удалив localhost:

# 127.0.0.1 localhost # line commented out
192.166.66.66 xyz.hbase.com hbase localhost # note: localhost added here

Это связано с тем, что когда удаленная машина запрашивает машину сервера hbase, где работает HMaster, она сообщает, что она работает на локальном хосте.
Итак, если запись 127.0.0.1, то сервер HBase возвращает этот адрес, и удаленная машина начинает находить HMaster на своей машине (локально).
Когда мы изменим это с помощью IP-адреса сервера HBase, все будет работать нормально :)

Я согласен. HBase очень чувствителен к конфигурациям /etc/hosts. Мне пришлось правильно установить свойство привязки zeekeeper в hbase-site.xml, чтобы вышеупомянутый код Java работал... Например: я пришлось поставить так:

{property}
  {name}hbase.zookeeper.quorum{/name}
  {value}www.remoterg12.net{/value}      {!-- this is the externally accessible domain --}
{/property}
{property}
  {name}hbase.zookeeper.property.clientPort{/name}
  {value}2181{/value}              {!-- everything needs to be externally accessible --}
{/property}
{property}
  {name}hbase.master.info.port{/name}    {!--   http://www.remoterg12.net:60010/ --}
  {value}60010{/value}
{/property}
{property}
  {name}hbase.master.info.bindAddress{/name}
  {value}www.remoterg12.net{/value}      {!-- Use this to access the GUI console, --}
{/property}

Удаленный графический интерфейс даст вам четкое представление о доменах привязки. Например, свойство [HBase Master] в «веб-консоли графического интерфейса» должно выглядеть примерно так: www.remoterg12.net:60010 (это НЕ должно быть localhost). :60010 )... И ДА!!, мне действительно пришлось поиграться с /etc/hosts, так как я не хотел портить существующие конфигурации Apache :-)

Эту же проблему можно решить, отредактировав файл conf/regionservers в каталоге hbase, чтобы добавить в него сервер Hbase (Remote). Тогда не нужно менять файл etc/hosts

После редактирования conf/regionservers будет выглядеть так:

localhost  
ip address of the remote hbase server

eg

localhost              
10.132.258.366

Точно такая же проблема с HBase 1.1.3. 2 виртуальные машины (Ubuntu) в одной сети. Журналы показывают, что клиент может получить доступ к Zookeeper, но не к серверу HBase.

TL;DR: удалите следующую строку в /etc/hosts на сервере (server_hostname):

127.0.1.1 server_hostname server_hostname

И добавьте этот с 127.x.y.z ip вашего сервера в (локальной) сети:

192.x.y.z server_hostname

Я пробовал много комбинаций на стороне клиента и сервера. В автономном режиме я не думаю, что есть лучший подход. Не особо этим гордился. Стыдно возиться с конфигурацией сети и даже не предоставлять клиент оболочки HBase, способный удаленно подключаться к серверу (добро пожаловать в мир иллюзий Java...)

На стороне сервера оставьте файлы conf/hbase-site.xml пустыми. Вам не нужно размещать здесь конфигурацию Zookeeper, по умолчанию все в порядке. То же самое для etc/regionservers. Оставьте его с записью по умолчанию (localhost), потому что я не думаю, что в автономном режиме это действительно важно (и я пытался поместить в него server_hostname, и, конечно, это не работает).

На стороне клиента он должен знать сервер по имени хоста, если вы хотите разрешить с ним, поэтому снова добавьте запись в ваш файл клиента /etc/hosts для сервера.

В качестве бонуса я даю вам свою конфигурацию sbt и некоторый полный рабочий код для клиента, так как команда HBase, похоже, потратила бюджет документации в Вегасе за последние 4 года (опять же, приветствую «Business ready » мир Java/Scala).

build.sbt:

libraryDependencies ++= Seq(
  ...
  "org.apache.hadoop" % "hadoop-core" % "1.2.1",
  "org.apache.hbase" % "hbase" % "1.1.2",
  "org.apache.hbase" % "hbase-client" % "1.1.2",
)

some_client_code.scala:

import org.apache.hadoop.hbase.HBaseConfiguration
import org.apache.hadoop.hbase.client.{HTable, Put, HBaseAdmin}
import org.apache.hadoop.hbase.util.Bytes

val hbaseConf = HBaseConfiguration.create()
hbaseConf.set("hbase.zookeeper.quorum", "server_hostname")
HBaseAdmin.checkHBaseAvailable(hbaseConf)

val table = new HTable(hbaseConf, "my_hbase_table")
val put = new Put(Bytes.toBytes("row_key"))
put.add(Bytes.toBytes("cf"), Bytes.toBytes("colId1"), Bytes.toBytes("foo"))

Я знаю, что уже слишком поздно отвечать на этот вопрос, но я хочу поделиться своим способом решения подобной проблемы.

У меня была такая же проблема, и я попытался установить кворум zookeeper из java-программы, а также попытался через CLI, но ни один из них не сработал.

Я использую CDH 5.7.7 с HBase версии 1.1.0. Наконец, мне пришлось экспортировать несколько конфигураций в путь к классам Hadoop, чтобы решить проблему. Вот конфиг, который я экспортировал.

export HADOOP_CLASSPATH=/etc/hadoop/conf:/usr/share/cmf/lib/cdh5/hbase-protocol-0.98.1-cdh5.5.0.jar:/etc/hbase/conf:/driven/conf

Надеюсь это поможет.