big data

PYthon Radio Astronomy anaLYSis and Image Synthesis

Studying the effects of music in the growth of plants through an IoT automated farming solution.

Nous avons entrepris un projet d'apprentissage automatique pour prédire des maladies en analysant les données symptomatiques et médicales. Notre modèle sophistiqué, basé sur des techniques d'apprentissage automatique avancées, évalue les symptômes pour fournir des prédictions précises. Avec une interface API développée avec Django et un déploiement sur Microsoft Azure via Terraform, notre solution est conviviale et évolutive.Découvrez notre projet ici :https://apipharma-app-service.azurewebsites.net/

Détection de tweets haineux par apprentissage automatique (NLP)) Nous avons developpé un modèle d'apprentissage automatique pour détecter efficacement les tweets contenant des contenus haineux/offensants, dans le but de lutter contre les comportements nuisibles en ligne. En parallèle, nous avons conçu une interface API avec Django et optimisé le déploiement en utilisant Docker et Azure via Terraform, assurant ainsi une mise en œuvre fluide et évolutive de notre solution: https://apitweet-app-service.azurewebsites.net/

Deploying PySpark Jobs on Azure HDInsight Spark Cluster (CI/CD)

Deep learning (CNN) deployment pipeline

A Python app for scanning large data sets of URLs for a given signature and storing the results to an ElasticSearch index. Useful applications for CERTs and security researchers, maybe others.

From Data ASOS (https://mesonet.agron.iastate.edu/request/download.phtml), Analysis of aviation data to underline some patterns

Spatial join of geospatial data from Kafka streams using Apache Spark (Spark Streaming).

New machine learning algorithms based on the minimum nescience principle

NLTK for sentiment analysis given a Twitter streaming for a word. Configuration scripts for MongoDB and twitter streaming.

This project aggregates trending data from Ukraine based Twitter accounts. The raw aggregated data is cleansed before analysis using some Big-data methods. The purpose of this project is to familiarize myself with the workings of Hadoop for HDFS and Map-Reduce infrastructure.

Taskmaster is a light-weight open-source software framework that aims to simplify distribution of big data processing and analysis tasks over multiple worker nodes.