Apache Falcon: Нова платформа за управление на данни за екосистемата Hadoop



Apache Falcon е нова платформа за управление на данни за екосистемата Hadoop, която опростява вградената обработка на фуражи и управлението на фуражи в клъстерите на hadoop. Научете как да го настроите.

Apache Falcon е рамка за управление на жизнения цикъл на данните в клъстерите Hadoop. Той установява връзка между различни данни и елементи за обработка в среда на Hadoop, а също така предоставя услуги за управление на фуражи като задържане на фуражи, репликации в клъстери, архивиране и др.





Нека първо обсъдим как да настроим Apache Falcon. Изпълнете командата по-долу, за да изтеглите git хранилището на Falcon:

Команда: git clone https://git-wip-us.apache.org/repos/asf/falcon.git falcon



git-command-apache-falcon

За да пуснете сокол, първо трябва да го изградите.

Команда: cd сокол



Команда: износ MAVEN_OPTS = ”- Xmx1024m -XX: MaxPermSize = 256m -noverify” && mvn clean install -DskipTests

Команда: mvn чист монтаж: монтаж -DskipTests -DskipITs

След като сте изградили falcon, ще намерите falcon пакет вътре в / falcon / distro / target / directory.

Командите за изграждане на сокол изглеждат много лесно, но ще се сблъскате с много проблеми, преди да видите съобщението Build Success. Изправих се пред много проблеми, докато го изграждах за Hadoop-2.2.0

Така че, за да пропуснете болката от изграждането на Falcon, ви предоставям успешно изграден пакет falcon, който можете да изтеглите, като използвате връзката по-долу.

https://edureka.wistia.com/medias/xw5cfzqmho/download?media_file_id=124642564

Разархивирайте файла, за да получите директория falcon-0.10.

Команда: разархивирайте сокол-0.10-SNAPSHOT.zip

Задайте променливи на средата на флакон във .bashrc файл.

Команда: sudo gedit .bashrc

Команда: източник .bashrc

Можете да отидете в сокол директория и да видите файловете и директориите в нея.

Команда: cd falcon-0.10-SNAPSHOT /

Команда: ls

Можете да намерите скриптове за соколи в директорията на bin.

Изпълнете командата отдолу, за да стартирате Falcon.

Команда: ./bin/falcon-start

Ще видите нов демон FalconServer, който работи сега.

Команда: jps

Команда: ./bin/falcon администраторска версия

как да създадете динамични уеб страници

Отворете браузъра си и отидете на localhost: 15000 . Можете да видите потребителския интерфейс на Falcon.

Имате въпрос към нас? Споменете ги в раздела за коментари и ние ще се свържем с вас.

Подобни публикации:

Пробиване на тренировка Apache