1
ответ
kafka + как отменить удаление темы
на случай, если мы удалим не ту тему как /usr/hdp/current/kafka-broker/bin/kafka-topics.sh --zookeeper hdpmaster01: 2181 --delete --topic gtom.poli.pri.proc Тема gtom.poli.pri.procis уже ...
вопрос задан: 3 December 2017 11:14
1
ответ
каков самый безопасный и лучший способ удалить папки тем kafka
на всех наших машинах kafka (производственные машины), мы видим, что:
/ dev / sdb 11T 11T 2.3M 100% / var / kafka ...
вопрос задан: 30 November 2017 19:17
1
ответ
Проблемы при программном добавлении ODBC DSN к администратору ODBC в Windows
Я пытаюсь автоматизировать некоторую настройку, и как часть этого нам нужно добавить ODBC DSN через сценарий. Я пытаюсь использовать драйвер Cloudera Impala ODBC Connector, загруженный ...
вопрос задан: 29 November 2017 00:49
1
ответ
Плохой шлюз NGINX и PHP-FPM 502
Хорошо, вот такая ситуация, в настоящее время у нас есть сервер и мы переходим на AWS. У нас какая-то идентичная конфигурация, и мы уже пытались запустить тестовый тест apache, поэтому пул PHP-FPM ...
вопрос задан: 28 November 2017 09:11
1
ответ
что происходит при запуске - hadoop namenode -format
у нас есть кластер amabri (версия 2.6) с 24 рабочими машинами, которые мы хотим запустить следующие команды только на машине worker23 (из-за проблемы на worker23), дозируйте эти команды на всех ...
вопрос задан: 20 November 2017 19:48
1
ответ
контрольная сумма calc md5 для всех файлов в каталоге hadoop
iam, использующий hadoop apache 2.7.1 на centos и iam, новый для centos, если я хочу вычислить контрольную сумму md5 для определенного файла в hadoop, я могу выполнить следующую команду hdfs dfs -cat / hadoophome / myfile | ...
вопрос задан: 29 August 2017 17:06
1
ответ
Невозможно использовать ssh localhost без пароля, несмотря на правильные разрешения, ключ в authorized_keys
У меня есть ключ ~ / .ssh / id_rsa, и я добавил ключ pub к своим авторизованным ключам: cat ~ / .ssh / id_rsa.pub >> ~ /. ssh / authorized_keys Я также изменил свои разрешения на 600: sudo chmod 600 ~ / .ssh / ...
вопрос задан: 13 August 2017 02:37
1
ответ
AH00428: Apache is continously restarting itself exiting with status 255
Does anyone have an idea why my Apache instance is constantly restarting itself? I see the following errors in the logs: [mpm_winnt:notice] [pid 2592:tid 420] AH00428: Parent: child process 1976 ...
вопрос задан: 8 August 2017 17:04
1
ответ
Кластерное оборудование Hadoop: мало крупных по сравнению с множеством мелких
, нам нужна помощь в принятии решения о том, какое оборудование купить для поддержки внутреннего кластера Hadoop. Моя компания в настоящее время использует 1 выделенный сервер для Hadoop с оперативной памятью 196 ГБ и 24 ядрами и 6 SATA емкостью 1 ТБ ...
вопрос задан: 3 August 2017 20:11
1
ответ
/usr/bin/env: python2.5: Никакой такой файл или каталог
Я пытаюсь играть с Распределением Cloudera для Hadoop на моей учетной записи EC2. Для конфигурирования его я использую ЭТО учебное руководство. Все кажется мне прекрасным, но когда я пытаюсь выполнить hadoop-ec2, я добираюсь...
вопрос задан: 17 July 2017 13:03
1
ответ
zookeeper automatic start operation fails when firewall is stopped at rc. local script
iam using hadoop apache 2.7.1 on centos 7 and my cluster is ha cluster and iam using zookeeper quorum for automatic failover but i want to automate zookeeper start process and of course course in the shell ...
вопрос задан: 11 July 2017 14:33
1
ответ
mount.nfs: mount system call failed
I am trying to mount hdfs on my local machine running Ubuntu using the following command :--- sudo mount -t nfs -o vers=3,proto=tcp,nolock 192.168.170.52:/ /mnt/hdfs_mount/ But I am getting this ...
вопрос задан: 29 June 2017 07:18
1
ответ
установка переменных среды для aws hadoop ec2
Я следовал этой книге: Hadoop в Действии, которое Это дает хорошему руководству по тому, как начать использовать ec2 с hadoop. Одна из первых вещей, которая, как это говорит, должна загрузить инструменты командной строки здесь: http://...
вопрос задан: 23 May 2017 05:41
1
ответ
копирование файлов в киосках hdfs
Иметь кластер из 35 узлов с большим количеством блоков в нем: ≈450K блоков на узел данных. После изменения конфигурации (которое включало переназначение стоек и увеличение NameNode Xmx) HDFS стала проблемой. ...
вопрос задан: 12 May 2017 07:44
1
ответ
Самый безопасный способ дать команды на кластере человечности с sudo'ing пользователем?
Это - вид последующего вопроса оставшемуся без ответа вопросу, который я имею относительно администрирования кластера Cloudera, но я полагаю, что обобщение вопроса всей Ubuntu может помочь мне получить ответ...
вопрос задан: 13 April 2017 15:14
1
ответ
hadoop: порт кажется открытым локально, но не удаленно
Я плохо знаком с Linux и hadoop, и у меня есть та же проблема как в этом вопросе. Я думаю, что понимаю то, что вызывает его, но я не знаю, как решить его (Не знайте то, что они подразумевают "Под редактированием...
вопрос задан: 13 April 2017 15:14
1
ответ
how to install hadoop2.4.1 in windows with spark 2.0.0
i want to setup a cluster using hadoop in yarn mode..i want to use spark API for map-reduce and will use spark submit to deploy my applications..i want to work on cluster..can anyone help me how to ...
вопрос задан: 13 March 2017 14:26
1
ответ
Установка Hadoop на нескольких экземплярах Ubuntu 10.04.1, работающей на VMware Workstation
Я хочу узнать о Hadoop и выполнить некоторые руки на распределенные вычисления путем выполнения некоторого программирования. У меня есть ПК с установленным Windows 7 Professional. На том же ПК у меня также есть Ubuntu 10.04.1...
вопрос задан: 9 February 2017 00:33
1
ответ
Настройка клиента Windows 10 для области Linux KDC
Я установил сервер KDC и создал Realm EXAMPLE.COM. Вот мой файл krb5.conf: [libdefaults] refresh_lifetime = 7d forwardable = true default_realm = EXAMPLE.COM ticket_lifetime = 24h ...
вопрос задан: 1 December 2016 16:31
1
ответ
почему я не могу получить доступ только к порту from localhost?
Я пытаюсь настроить elasticsearch на виртуальной машине redhat, выпущенной mapR. Он поставляется с предварительно загруженной экосистемой mapR. Я установил elasticsearch через yum. Я могу слушать его изнутри ...
вопрос задан: 22 November 2016 22:47
1
ответ
Hadoop datanode - начните с одного диска и добавьте позже или начните с как можно большего количества дисков и заполните их поровну
Мне интересно следующее относительно настройки дисков Datanode в кластере Hadoop. Какой из этих двух вариантов лучше: добавить один (или несколько) дисков к Datanode и подключить больше после того, как они ...
вопрос задан: 28 October 2016 09:08
1
ответ
Hadoop FileAlreadyExistsException: Output directory hdfs://:9000/input already exists
I have Hadoop setup in fully distributed mode with one master and 3 slaves. I am trying to execute a jar file named Tasks.jar which is taking arg[0] as input directory and arg[1] as output directory. ...
вопрос задан: 14 October 2016 18:59
1
ответ
Запуск HDFS только с 1 узлом данных - сбой добавления
Я пытаюсь протестировать некоторые службы, требующие HDFS, с помощью Docker Compose. Поскольку тестируемые службы, именные узлы и узлы данных будут работать на одном физическом компьютере (ноутбуке разработчика), он ...
вопрос задан: 4 October 2016 21:01
1
ответ
Можно ли подключиться к серверу по ssh без использования флага -i для ключа?
У меня есть 3 экземпляра EC2, и все они используют один и тот же закрытый ключ. Я настраиваю кластер hadoop между этими узлами, и для работы им требуется вход без пароля. Как я могу использовать этот закрытый ключ ...
вопрос задан: 26 September 2016 20:03
1
ответ
Включение квот на разделы xfs
ОС: Ubuntu 16.04 Я установил инструмент командной строки quota из apt и нашел несколько инструкций по включению квоты в корневом разделе, добавив rootflags = uquota, gquota к GRUB_CMDLINE_LINUX ...
вопрос задан: 4 September 2016 04:24
1
ответ
Почему DFSZKFailoverController убивает процесс Namenode в hadoop?
Я пытаюсь настроить кластер высокой доступности hadoop, следуя этому руководство:
http://www.edureka.co/blog/how-to-set-up-hadoop-cluster-with-hdfs-high-availability/ Когда я слежу за этой статьей, я сталкиваюсь с ...
вопрос задан: 17 July 2016 17:46
1
ответ
zfs для облака Hadoop вместо ext4 [closed]
Сейчас у меня есть пара линодов с ext4. У меня есть настройка Hadoop.
Какую выгоду я получу, если перенесу свою файловую систему с ext4 на zfs. Будет ли какая-либо польза от времени отклика?
Любая скорость...
вопрос задан: 20 April 2016 09:09
1
ответ
Сервер заполнен оперативной памятью, но не показывает, какой процесс использует много ОЗУ
Один из наших узлов данных Hadoop с 64-разрядной версией CentOS7 использует всю свою оперативную память, я попытался выяснить, какой процесс использует столько оперативной памяти, но не смог. Пожалуйста, помогите мне это проверить: Система: CentOS 7 ...
вопрос задан: 13 April 2016 10:19
1
ответ
Hadoop - Имя узла и узла данных на одном компьютере
У нас есть 7 идентичных физических серверов (2x8 основных ЦП, 128 ГБ ОЗУ, 8 дисков по 6 ТБ), которые будут использоваться для Hadoop. Все машины подключены к коммутатору 10G с двойными интерфейсами 10G. Поскольку мы не ...
вопрос задан: 15 March 2016 10:32
1
ответ
Принудительно использовать hadoop для подключения к S3
Я пытаюсь загрузить файл на S3 с помощью hadoop: hadoop fs -Dfs.s3a.connection.ssl.enabled = false -Dfs.s3a .proxy.host = 127.0.0.1 -Dfs.s3a.proxy.port = 8123 -put pig_1421167148680.log s3a: // доступ:секрет @ ...
вопрос задан: 8 January 2016 19:08