Es posible convertir tablas internas en SAP ABAP a formato Parquet y subirlas a S3 usando el AWS SDK for SAP ABAP?

Question

**Hola a todos**, actualmente tengo implementado un programa en SAP ABAP que convierte tablas internas a archivos CSV y los sube a un bucket en Amazon S3 utilizando el AWS SDK for SAP ABAP. Incluso he aplicado particionamiento en archivos más pequeños para manejar grandes volúmenes de datos.

El problema que estoy enfrentando es que tanto el tamaño de los archivos CSV como el tiempo total de conversión y carga a S3 son elevados. Por eso, estoy evaluando si es posible mejorar este proceso generando directamente archivos en formato Parquet desde SAP.

**¿Existe alguna forma oficial o recomendada de convertir datos de tablas internas ABAP a archivos Parquet directamente desde SAP usando el AWS SDK for SAP ABAP y subirlos a S3?**

Agradezco mucho cualquier orientación, ejemplos o confirmación sobre si esto es posible o no, ya que no he podido averiguar con certeza si se puede o no.

re:Post Agent · Answer

Basado en la información disponible sobre el AWS SDK for SAP ABAP, actualmente no existe una forma oficial o directa de convertir tablas internas de ABAP a formato Parquet y subirlas a S3 usando este SDK específico.

El AWS SDK for SAP ABAP proporciona funcionalidades para interactuar con servicios de AWS como Amazon S3, pero se enfoca principalmente en operaciones básicas como subir, descargar y listar objetos en formato binario o de texto plano.

Para subir objetos a S3, el SDK utiliza el método PutObject, que acepta el contenido del objeto como un parámetro de tipo xstring (cadena binaria). Este método no tiene funcionalidad incorporada para convertir o manejar formatos específicos como Parquet.

Si bien es posible subir archivos binarios a S3 usando este SDK, la conversión a formato Parquet tendría que realizarse por separado, probablemente utilizando bibliotecas o herramientas externas que no están incluidas en el SDK estándar.

Para mejorar tu proceso actual, podrías considerar las siguientes alternativas:

1. Realizar la conversión a Parquet en un paso separado fuera de SAP, después de subir los datos a S3.
2. Investigar si existen bibliotecas de terceros para ABAP que puedan generar archivos Parquet.
3. Explorar opciones para optimizar la generación y carga de CSV, como compresión o ajustes en el particionamiento.

En resumen, aunque el AWS SDK for SAP ABAP permite subir datos a S3, no ofrece una solución integrada para la conversión directa a formato Parquet desde tablas internas de ABAP.  
**Sources**  
[Using AWS SDK for SAP ABAP - AWS SDK for SAP ABAP](https://docs.aws.amazon.com/sdk-for-sapabap/latest/developer-guide/using-sdk.html)  
[Amazon S3 examples using SDK for SAP ABAP - AWS SDK Code Examples](https://docs.aws.amazon.com/code-library/latest/ug/sap-abap_1_s3_code_examples.html)  
[Amazon S3 example program - AWS SDK for SAP ABAP](https://docs.aws.amazon.com/sdk-for-sapabap/latest/developer-guide/example-program.html)

Es posible convertir tablas internas en SAP ABAP a formato Parquet y subirlas a S3 usando el AWS SDK for SAP ABAP?

Contenido relevante