17. Po nastavení klastra jediného uzla hadoop je čas inicializovať systém súborov HDFS formátovaním /opt/volume/namenode úložný adresár s nasledujúcim príkazom:
$ hdfs formát názvu.
18. Príkazy Hadoop sa nachádzajú v $ HADOOP_HOME/sbin
adresár. Na spustenie služieb Hadoop spustite na svojej konzole nasledujúce príkazy:
$ start-dfs.sh. $ start-yarn.sh.
Nasledujúcim príkazom skontrolujte stav služieb.
$ jps.
Prípadne si môžete prezrieť zoznam všetkých otvorených zásuviek pre Apache Hadoop vo vašom systéme pomocou ss príkaz.
$ ss -tul. $ ss -tuln # Číselný výstup.
19. Na testovanie klastra systému súborov hadoop vytvorte náhodný adresár v systéme súborov HDFS a skopírujte súbor z lokálneho systému súborov do HDFS úložisko (vložte údaje do HDFS).
$ hdfs dfs -mkdir /my_storage. $ hdfs dfs -put LICENSE.txt /my_storage.
Ak chcete zobraziť obsah súboru alebo zobraziť zoznam adresárov v systéme súborov HDFS, zadajte nasledujúce príkazy:
$ hdfs dfs -cat /my_storage/LICENSE.txt. $ hdfs dfs -ls /my_storage /
Na načítanie údajov z HDFS do nášho lokálneho systému súborov použite nasledujúci príkaz:
$ hdfs dfs -get/ my_storage/ ./
Získajte úplný zoznam možností príkazov HDFS vydaním:
$ hdfs dfs -pomoc.
20. Ak chcete získať prístup k službám Hadoop zo vzdialeného prehliadača, navštívte nasledujúce odkazy (podľa toho nahraďte IP adresu FQDN). Uistite sa tiež, že na bráne firewall systému sú otvorené nasledujúce porty.
Pre Hadoop Prehľad služby NameNode.
http://192.168.1.41:50070
Na prehliadanie systému súborov Hadoop (Prehľadávanie adresárov).
http://192.168.1.41:50070/explorer.html.
Informácie o klastroch a aplikáciách (ResourceManager).
http://192.168.1.41:8088
Informácie o NodeManager.
http://192.168.1.41:8042
21. Ak chcete zastaviť všetky inštancie hadoop, spustite nasledujúce príkazy:
$ stop-yarn.sh. $ stop-dfs.sh.
22. Ak chcete povoliť démona Hadoop v celom systéme, prihláste sa pomocou rootového používateľa /etc/rc.local
súbor na úpravu a pridajte nasledujúce riadky:
$ su - koreň. # vi /etc/rc.local.
Pridajte tieto úryvky do rc.local súbor.
su -hadoop -c "/opt/hadoop/sbin/start-dfs.sh" su -hadoop -c "/opt/hadoop/sbin/start-yarn.sh" výjazd 0.
Potom pridajte spustiteľné povolenia pre rc.local
súbor a povoľte, spustite a skontrolujte stav služby zadaním nasledujúcich príkazov:
$ chmod +x /etc/rc.d/rc.local. $ systemctl povoliť rc-local. $ systemctl start rc-local. $ systemctl status rc-local.
To je všetko! Nabudúce ty reštartovať váš stroj Hadoop služby sa vám automaticky spustia! Všetko, čo musíte urobiť, je spustiť aplikáciu kompatibilnú s Hadoop a môžete ísť!
Ďalšie informácie získate od oficiálnych zástupcov Dokumentácia Apache Hadoop webová stránka a Hadoop Wiki stránku.