Estoy haciendo un proyecto para aprender Apache Spark / Kafka / Jupyter la idea es hacer un stream con los mensajes del slack de colombia.dev a Kafka, consumirlos con Spark para hacer consultas como hora/dia mas activo del chat, usuarios mas activos, links/mensajes mas populares, canales mas populares, y dibujar estas estadisticas con jupyter, todo el codigo sera puesto opensource y estara activo solo desde mi maquina mientras cacharreo, la app de slack ya esta creada en el workspace y necesita aprobacion para poder consumir los datos, ya estoy probando con un slack propio pero yo y mi otro yo no generamos ningun insight interesante
Estoy haciendo un proyecto para aprender Apache Spark / Kafka / Jupyter la idea es hacer un stream con los mensajes del slack de colombia.dev a Kafka, consumirlos con Spark para hacer consultas como hora/dia mas activo del chat, usuarios mas activos, links/mensajes mas populares, canales mas populares, y dibujar estas estadisticas con jupyter, todo el codigo sera puesto opensource y estara activo solo desde mi maquina mientras cacharreo, la app de slack ya esta creada en el workspace y necesita aprobacion para poder consumir los datos, ya estoy probando con un slack propio pero yo y mi otro yo no generamos ningun insight interesante