IT工程師數位筆記本

可以看到自動為WordCount類創建了main方法。

Maven管理項目的核心就是pom.xml，在這個文件中有工程編寫運行時的依賴的支持。

編寫程序前需要先修改pom.xml。

  4.0.0  com.dt.spark  SparkApps  0.0.1-SNAPSHOT  jar  SparkApps  http://maven.apache.org      UTF-8              junit      junit      3.8.1      test               org.apache.spark       spark-core_2.10       1.6.0                org.apache.spark        spark-sql_2.10        1.6.0              org.apache.spark      spark-hive_2.10      1.6.0         org.apache.spark     spark-streaming_2.10     1.6.0     org.apache.hadoop     hadoop-client     2.6.0     org.apache.spark     spark-streaming-kafka_2.10     1.6.0     org.apache.spark     spark-graphx_2.10     1.6.0           src/main/java     src/main/test                               maven-assembly-plugin                                                   jar-with-dependencies                                                                                                                                                                                          make-assembly                      package                                               single                                                                                             org.codehaus.mojo               exec-maven-plugin               1.3.1                                                                              exec                                                                                        java                   false                   compile                   com.dt.spark.SparkApps.WordCount                                                   org.apache.maven.plugins              maven-compiler-plugin                                1.6                  1.6