Integración de datos

Integración de datos

Descripción

Debates sobre <strong>Integración de Datos</strong>, software ETL y MDM, metodologías y mejores prácticas

Proyecto de analítica de datos de redes sociales

Estoy planteándome comenzar un proyecto de analítica de datos a partir de interacciones en redes sociales, obteniendo datos a través de las API que proporcionan las redes.

Quiero comenzar con datos de Twitter, siguiendo un poco la idea de del post de Sergio sobre obtención de datos de Twitter con servicios web como Zapier o IFTTT, pero en lugar de utilizar los servicios de estos sitios y volcar los datos sobre hojas de cálculo, quiero utilizar un software de ETL para conectar con las redes sociales y guardar los datos en tablas de bases de datos.

Las herramientas de ETL que me planteo utilizar son Pentaho Data Integrator (Kettle para los amigos) o SQL Server Integration Services, pero aún no tengo claro cuál me va a ir mejor para mis objetivos.

SSIS conectar a una base de datos Informis 2000

 Hola a todos:

Tengo una dificultad no se si alguien me puede ayudar, tengo que conectarme mediante el SQL 2008 SSIS a una base de datos Informix 2000 y no puedo conectar me sale un error, lo raro es que puedo ver las tablas pero cuando trato de sacar la informacion de una tabla me da un error les copio el error.

 

TITLE: Editing Component

------------------------------

 

The component has detected potential metadata corruption during validation.

Error at Data Flow Task [ADO NET Source [1]]: System.Data.Odbc.OdbcException: ERROR [HY010] [OpenLink][ODBC][Driver]Function sequence error

 

ERROR [HY010] [OpenLink][ODBC][Driver]Function sequence error

ERROR [HY010] [OpenLink][ODBC][Driver]Function sequence error

ERROR [HY010] [OpenLink][ODBC][Driver]Function sequence error

ERROR [HY010] [OpenLink][ODBC][Driver]Function sequence error

ERROR [HY010] [OpenLink][ODBC][Driver]Function sequence error

   en System.Data.Odbc.OdbcDataReader.NextResult(Boolean disposing, Boolean allresults)

   en System.Data.Odbc.OdbcDataReader.Close(Boolean disposing)

   en System.Data.Odbc.OdbcDataReader.Close()

   en Microsoft.SqlServer.Dts.Pipeline.DataReaderSourceAdapter.Validate()

Cargar surrogate key (sin que este definido en la tabla como autonumerico) con SSIS 2008 R2

Estimados, me encuentro con una inconveniente en el desarrollo de una ETL con SSIS 2008 r2.

Dentro de cada tabla del DW, se ha creado un campo id (surrogate key) que por metodologias de la compañía, a estos campos no se los diseña como unique ni autonuméricos, por lo que la autonumeración debería realizarse a mano dentro del data flow del package, he intentado de varias maneras y no consigo que los registros nuevos lleven id diferente.

Si alguno me puede orientar con este tema, le estaré muy agradecido.

 

Saludos.

Adrián