杜龙少(sdvdxl)

杜龙少(sdvdxl)

知识的积累,思想的火花

运行第一个SparkStreaming程序(及过程中问题解决)
官方示例说明按照官方文档的 这个示例说明,可以轻松的在本地的spark-shell环境中测试这个示例。示例,即为了更好的入门,那么就再说明一下。运行这个统计单词的方式有三种,前面两种是官方文档上的指引,第三种则是用scala程序运行。 第一种方式, run-demo 打开一个终端,打开一个终端,输入 命令 nc -lk 9999,暂时叫做 “nc终端” 吧 再打开终端,切换到Spark HOME目录, 执行命令 bin/run-example org.apache.spark.examples.streaming.NetworkWordCount localhost 9999,...
Apache-Sqoop 安装
准备首先当然是下载sqoopsqoop 依赖以下软件,点击链接可以直接下载 hadoopaccumuloapache-hivehbasezookeeper 配置配置JAVA环境变量JAVA_HOME=/home/du/software/dev/jdk1.7.0_45 123export JAVA_HOME=/usr/install/java #此处换成自己的jdk目录export CLASSPATH=.:$JAVA_HOME/jre/libexport PATH=$PATH:$JAVA_HOME/bin 配置sqoop运行依赖12345678export HADOOP_COMMO...
Sqoop使用
sqoop help 查看帮助信息sqoop help COMMAND 查看 COMMAND具体的帮助,如要查看 list-databases 命令的用法,则使用 sqoop help list-databases 查看。 主要可用的命令如下: 命令 功能 help List available commands import Import a table from a database to HDFS list-databases List available databases on a server list-tables List available ta...
404
暂时没有您要查看的内容,点击返回主页看看其他内容吧😁