Puntos de control
Create a Dataproc cluster (region: us-central1)
/ 50
Submit a Spark Job
/ 25
Update a cluster for 5 worker nodes
/ 25
Explorador de APIs: Creación y actualización de un clúster
GSP288
Descripción general
El Explorador de APIs de Google es una herramienta que te ayuda a explorar varias APIs de Google de manera interactiva. Con el Explorador de APIs, puedes hacer lo siguiente:
- Explorar rápidamente las APIs y versiones disponibles
- Ver los métodos disponibles para cada API y los parámetros que admiten, junto con la documentación intercalada
- Ejecutar solicitudes para cualquier método y ver las respuestas en tiempo real
- Hacer llamadas autenticadas y autorizadas a la API
- Buscar en todos los servicios, los métodos y tus solicitudes recientes para encontrar al instante lo que estás buscando
El Explorador de APIs utiliza su propia clave de API cada vez que realiza una solicitud. Cuando lo usas para realizar una solicitud, muestra la sintaxis de esa solicitud, que incluye un marcador de posición con la etiqueta {YOUR_API_KEY}. Si deseas realizar la misma solicitud en tu aplicación, debes reemplazar este marcador de posición por tu propia clave de API.
En este lab, aprenderás a usar una plantilla intercalada del Explorador de APIs de Google para llamar a la API de Cloud Dataproc y crear un clúster y, luego, ejecutar un trabajo simple de Spark en él. Además, aprenderás a usar la plantilla del Explorador de APIs para llamar a la API de Cloud Dataproc con el objetivo de actualizar un clúster.
Configuración y requisitos
Antes de hacer clic en el botón Comenzar lab
Lee estas instrucciones. Los labs son cronometrados y no se pueden pausar. El cronómetro, que comienza a funcionar cuando haces clic en Comenzar lab, indica por cuánto tiempo tendrás a tu disposición los recursos de Google Cloud.
Este lab práctico te permitirá realizar las actividades correspondientes en un entorno de nube real, no en uno de simulación o demostración. Para ello, se te proporcionan credenciales temporales nuevas que utilizarás para acceder a Google Cloud durante todo el lab.
Para completar este lab, necesitarás lo siguiente:
- Acceso a un navegador de Internet estándar (se recomienda el navegador Chrome)
- Tiempo para completar el lab: Recuerda que, una vez que comienzas un lab, no puedes pausarlo.
Cómo iniciar tu lab y acceder a la consola de Google Cloud
-
Haga clic en el botón Comenzar lab. Si debe pagar por el lab, se abrirá una ventana emergente para que seleccione su forma de pago. A la izquierda, se encuentra el panel Detalles del lab, que tiene estos elementos:
- El botón Abrir la consola de Google Cloud
- El tiempo restante
- Las credenciales temporales que debe usar para el lab
- Otra información para completar el lab, si es necesaria
-
Haz clic en Abrir la consola de Google Cloud (o haz clic con el botón derecho y selecciona Abrir el vínculo en una ventana de incógnito si ejecutas el navegador Chrome).
El lab inicia recursos y abre otra pestaña en la que se muestra la página de acceso.
Sugerencia: Ordene las pestañas en ventanas separadas, una junto a la otra.
Nota: Si ves el diálogo Elegir una cuenta, haz clic en Usar otra cuenta. -
De ser necesario, copia el nombre de usuario a continuación y pégalo en el diálogo Acceder.
{{{user_0.username | "Username"}}} También puedes encontrar el nombre de usuario en el panel Detalles del lab.
-
Haz clic en Siguiente.
-
Copia la contraseña que aparece a continuación y pégala en el diálogo Te damos la bienvenida.
{{{user_0.password | "Password"}}} También puedes encontrar la contraseña en el panel Detalles del lab.
-
Haz clic en Siguiente.
Importante: Debes usar las credenciales que te proporciona el lab. No uses las credenciales de tu cuenta de Google Cloud. Nota: Usar tu propia Cuenta de Google podría generar cargos adicionales. -
Haga clic para avanzar por las páginas siguientes:
- Acepta los Términos y Condiciones.
- No agregues opciones de recuperación o autenticación de dos factores (esta es una cuenta temporal).
- No te registres para obtener pruebas gratuitas.
Después de un momento, se abrirá la consola de Google Cloud en esta pestaña.
Activa Cloud Shell
Cloud Shell es una máquina virtual que cuenta con herramientas para desarrolladores. Ofrece un directorio principal persistente de 5 GB y se ejecuta en Google Cloud. Cloud Shell proporciona acceso de línea de comandos a tus recursos de Google Cloud.
- Haz clic en Activar Cloud Shell en la parte superior de la consola de Google Cloud.
Cuando te conectes, habrás completado la autenticación, y el proyecto estará configurado con tu PROJECT_ID. El resultado contiene una línea que declara el PROJECT_ID para esta sesión:
gcloud
es la herramienta de línea de comandos de Google Cloud. Viene preinstalada en Cloud Shell y es compatible con la función de autocompletado con tabulador.
- Puedes solicitar el nombre de la cuenta activa con este comando (opcional):
-
Haz clic en Autorizar.
-
Ahora, el resultado debería verse de la siguiente manera:
Resultado:
- Puedes solicitar el ID del proyecto con este comando (opcional):
Resultado:
Resultado de ejemplo:
gcloud
, consulta la guía con la descripción general de gcloud CLI en Google Cloud.
Tarea 1. Abre el Explorador de APIs
-
Ve al menú de navegación > APIs y servicios.
-
Desplázate por la lista hasta encontrar la API de Cloud Dataproc y haz clic en ella.
-
Asegúrate de que la API esté habilitada; si no lo está, haz clic en Habilitar.
-
Ahora que verificaste que la API estuviera habilitada, abre Referencia de la API de REST. Esta acción abrirá una nueva pestaña con la página Referencia de la API de Rest para la API de Cloud Dataproc.
Tarea 2. Crea un clúster
Para crear un clúster, en la sección APIs y referencias de la izquierda, navega a Referencia de REST > v1 > projects.regions.clusters > create para el método projects.regions.clusters.create
, o bien usa la referencia Método: projects.regions.clusters.create.
Ahora completa el formulario y ejecuta la plantilla del Explorador de APIs, como se indica a continuación:
- Ingresa el ID de tu proyecto de Qwiklabs en el campo projectId.
- Establece el campo de la región en
. - En Cuerpo de la solicitud, haz clic entre las llaves y agrega la propiedad
clusterName
. Ingresa el nombre del clúster que elijas. Ten en cuenta que el valor de "clusterName" no debe contener letras mayúsculas ni espacios. - En el menú desplegable Agregar una propiedad, selecciona
config
. - En el menú desplegable Agregar una propiedad, selecciona
gceClusterConfig
. - En el mismo menú desplegable, selecciona el campo
zoneUri
y agrega lo siguiente, pero reemplazamy-project-id
por el ID del proyecto de este lab:
- En la llave que aparece abajo de
config
, seleccionasoftwareConfig
. - En la llave que aparece abajo de
softwareConfig
, seleccionaimageVersion
y establécelo en2.0-debian10
. - En la llave que aparece abajo de
softwareConfig
, seleccionaoptionalComponents
. EnoptionalComponents
, haz clic en AGREGAR ELEMENTO y, en el menú desplegable, seleccionaJUPYTER
.
Cuando finalices, el cuerpo de la solicitud se verá de la siguiente manera:
- En la sección Credenciales, asegúrate de que estén seleccionadas las casillas de verificación Google OAuth 2.0 y Clave de API.
-
Asegúrate de que no haya espacios finales en los campos.
-
Ahora desplázate hacia abajo y haz clic en Ejecutar.
-
Selecciona la cuenta de estudiante con la que iniciaste el lab.
-
En la siguiente pantalla, haz clic en Permitir para conceder acceso al Explorador de APIs.
-
Los resultados de la API de Dataproc aparecerán debajo de la solicitud y se verán de la siguiente manera:
- Para ver el clúster que se creó, puedes ir al menú de navegación > Dataproc > Clústeres.
Prueba la tarea completada
Haz clic en Revisar mi progreso para verificar la tarea realizada. Si creaste correctamente el clúster de Dataproc en la región
Tarea 3. Ejecuta un trabajo de Spark
A continuación, ejecutarás un trabajo simple de Apache Spark que calcula un valor aproximado de pi en un clúster existente de Cloud Dataproc.
- En la sección APIs y referencias de la izquierda, navega a Referencia de REST > v1 > projects.regions.jobs > submit para el método
projects.regions.jobs.submit
o usa este vínculo para enviar un trabajo a un clúster.
Ahora completa el formulario y ejecuta la plantilla del Explorador de APIs, como se indica a continuación:
- Ingresa el ID de tu proyecto en el campo projectId.
- Establece el campo de la región en
. - En Cuerpo de la solicitud, haz clic entre las llaves y selecciona
job
. - Haz clic en las llaves y selecciona
placement
. - Haz clic en las llaves y selecciona
clusterName
; luego, ingresa el nombre de tu clúster. - En la llave debajo del trabajo, seleccione
sparkJob
. - Ahora, debes agregar 3 elementos en sparkJob:
- En la llave que aparece debajo de sparkjob, selecciona
args
. Enargs
, haz clic en AGREGAR ELEMENTO y escribe 1000. - En el menú desplegable Agregar una propiedad, selecciona
jarFileUris
. EnjarFileUris
, haz clic en AGREGAR ELEMENTO y escribefile:///usr/lib/spark/examples/jars/spark-examples.jar
. - En el menú desplegable Agregar una propiedad, selecciona
mainClass
y escribeorg.apache.spark.examples.SparkPi
.
Cuando finalices, el cuerpo de la solicitud se verá de la siguiente manera:
- En la sección Credenciales, asegúrate de que estén seleccionadas las casillas de verificación Google OAuth 2.0 y Clave de API.
- Asegúrate de que no haya espacios finales en los campos. Haz clic en EJECUTAR.
Los resultados de la API de Dataproc aparecerán debajo de la solicitud y se verán de la siguiente manera:
-
Puedes encontrar los resultados en Dataproc > Clústeres. Haz clic en el nombre de tu clúster y, luego, en la pestaña Trabajos.
-
Haz clic en el ID del trabajo y establece Ajustar líneas en ACTIVADO para que se vean las líneas que sobrepasan el margen derecho.
Prueba la tarea completada
Haz clic en Revisar mi progreso para verificar la tarea realizada. Si enviaste correctamente un trabajo de Spark a un clúster, verás una puntuación de evaluación.
Tarea 4. Actualiza un clúster
- En la sección APIs y referencias de la izquierda, navega a Referencia de REST > v1 > projects.regions.clusters > patch para el método
projects.regions.clusters.patch
o usa este vínculo para actualizar un clúster.
Ahora completa el formulario y ejecuta la plantilla del Explorador de APIs, como se indica a continuación:
- projectID = el ID del proyecto
- Región =
- clusterName = ingresa el nombre del clúster
- updateMask = config.worker_config.num_instances
- En el cuerpo del parche, ingresa lo siguiente:
- Primera llave =
config
- Haz clic en la llave que aparece debajo de esto y selecciona
workerConfig
- Haz clic en la llave que aparece debajo de esto y selecciona
numInstances
; luego, ingresa 3.
Tu formulario debería verse así:
- En la sección Credenciales, asegúrate de que estén seleccionadas las casillas de verificación Google OAuth 2.0 y Clave de API.
- Asegúrate de que no haya espacios finales en los campos. Haz clic en EJECUTAR.
Los resultados de la API de Dataproc aparecerán debajo de la solicitud y se verán de la siguiente manera:
- Para verificar esta actualización, regresa a la página Clústeres de Dataproc. Verás que ahora tienes 3 nodos trabajadores en total.
Prueba la tarea completada
Haz clic en Revisar mi progreso para verificar la tarea realizada. Si actualizaste correctamente una configuración del trabajador para 3 nodos trabajadores, verás una puntuación de evaluación.
Tarea 5. Pon a prueba tus conocimientos
A continuación, se presentan algunas preguntas de opción múltiple para reforzar tus conocimientos de los conceptos de este lab. Trata de responderlas lo mejor posible.
¡Felicitaciones!
Usaste la API de Cloud Dataproc con el Explorador de APIs para crear un clúster, ejecutaste un trabajo de Spark y actualizaste un clúster.
Finaliza la Quest
Este lab de autoaprendizaje forma parte de la Quest Exploring APIs. Una Quest es una serie de labs relacionados que forman una ruta de aprendizaje. Si completas esta Quest, obtendrás una insignia como reconocimiento por tu logro. Puedes hacer públicas tus insignias y agregar vínculos a ellas en tu currículum en línea o en tus cuentas de redes sociales. Inscríbete en esta Quest y obtén un crédito inmediato de realización. Consulta el catálogo de Google Cloud Skills Boost para ver todas las Quests disponibles.
Próximos pasos y más información
- Lee la página Preguntas frecuentes sobre el Explorador de APIs.
- Obtén más información acerca de la API de Cloud Dataproc.
Capacitación y certificación de Google Cloud
Recibe la formación que necesitas para aprovechar al máximo las tecnologías de Google Cloud. Nuestras clases incluyen habilidades técnicas y recomendaciones para ayudarte a avanzar rápidamente y a seguir aprendiendo. Para que puedas realizar nuestros cursos cuando más te convenga, ofrecemos distintos tipos de capacitación de nivel básico a avanzado: a pedido, presenciales y virtuales. Las certificaciones te ayudan a validar y demostrar tus habilidades y tu conocimiento técnico respecto a las tecnologías de Google Cloud.
Actualización más reciente del manual: 18 de octubre de 2023
Prueba más reciente del lab: 20 de octubre de 2023
Copyright 2024 Google LLC. All rights reserved. Google y el logotipo de Google son marcas de Google LLC. Los demás nombres de productos y empresas pueden ser marcas de las respectivas empresas a las que estén asociados.