• Instalación
• Creación de un Proyecto Apex

Instalación

En primer lugar vamos a instalar las herramientas que nos haran falta para compilar la CLI y un proyecto base.

apt-get -y update; apt-get -y install openjdk-8-jdk maven

Definimos la variable de entorno de JAVA_HOME

export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-amd64/

Ahora vamos a descargar el código fuente de Apex para construir la ApexCLI:

wget http://apache.rediris.es/apex/apache-apex-core-3.7.0/apache-apex-core-3.7.0-source-release.tar.gz; tar -xvf apache-apex-core-3.7.0-source-release.tar.gz; cd apache-apex-core-3.7.0

Ejecutamos mvn install -DskipTests para crear el binario apex. Una vez haya finalizado encontramos el binario en ./engine/src/main/scripts/apex.

Una vez ejecutemos el binario apex intentara localizar hadoop por lo que vamos a instalarlo en primer lugar:

root@ip-172-31-2-55:~/apache-apex-core-3.7.0# ./engine/src/main/scripts/apex
Warning: hadoop executable not found.  Running standalone with java.
Apex CLI 3.6.0 Unknown Unknown
apex>

La instalación de hadoop podemos realizarla siguiente el tutorial Instalación Hadoop. Una vez instalado debemos añadir el binario de hadoop al PATH:

Nota: Usar hadoop 2.6.5.

export PATH=$PATH:/root/hadoop-2.6.5/bin/

Si ahora volvemos a ejecutar la ApexCLI veremos que ya no nos muestra el warning:

root@ip-172-31-2-55:~/apache-apex-core-3.7.0# ./engine/src/main/scripts/apex
Apex CLI 3.7.0 Unknown Unknown
apex>

Creación de un Proyecto Apex

Para crear un esqueleto base que podemos usar para desarrollar nuestra aplicación, vamos a utilizar maven.

mvn archetype:generate \
                -DarchetypeGroupId=org.apache.apex \
                -DarchetypeArtifactId=apex-app-archetype -DarchetypeVersion=3.7.0 \
                -DgroupId=com.example -Dpackage=com.example.myapexapp -DartifactId=myapexapp \
                -Dversion=1.0-SNAPSHOT

Una vez termine la ejecucción veremos una carpeta llamada myapexapp donde encontraremos un esqueleto base. Este ejemplo base es un DAG que genera numero aleatorio que se imprimen en la consola. Para compilar el proyecto utilizaremos maven mvn clean package. Al compilarlo gracias al assembly que viene en el esqueleto nos genera un fichero .apa dentro de la carpeta target este fichero es nuestra aplicación Apex que subiremos al cluster utilizando la ApexCLI.

Para lanzar la aplicación con la ApexCLI, en primer lugar arrancamos el ApexCLI:

apex> launch ~/myapexapp/target/myapexapp-1.0-SNAPSHOT.apa

Una vez ejecutado deberiamos de ver su ejecucción en el resourcemanager http://${resource.manager.address}:8088.