Effektive Code Reviews für Data-Science-Projekte
Code Reviews sind eine gängige Praxis in der Softwareentwicklung, doch sie sind auch in Data-Science-Projekten relevant und sinnvoll. Der Artikel beleuchtet die Gründe dafür und gibt Hinweise darauf, wie Code Reviews in Data-Science-Projekten effektiv gestaltet werden können.
SQLDays – Vortrag Azure Data Factory 2022 – whats new?
SQLDays 2022 - Folien zum Vortrag von Stefan Kirner zu Neuigikeiten in der Azure Data Factory und Synapse Pipelines und ein Vergleich der Technologien.
Kooperation mit Intel®: Quantisierung von ML-Modellen und Performance-Boost im Pre-Processing
scieneers sind AI Specialist Partner des Halbleiterhersteller Intel®. Wir erproben in realen Einsatzszenarien, wie durch Intels neueste Technologien und Tools die Performance analytischer Modelle und Berechnungen auf großen Datenmengen weiter gesteigert werden können
Tipps & Tricks bei der Entwicklung eines Dashboards mit Streamlit & Plotly
Wir haben mit Streamlit und plotly.express ein web-basiertes Dashboard für die Übersicht über CO2-Emissionen gebaut. Dieser Blogeintrag zeigt einige Tipps und Tricks, die wir bei der Implementierung und dem Deployment des Dashboards gelernt haben.
informatica feminale Baden-Württemberg 2022 – ein Rückblick
Dieses Jahr fand die informatica feminale Baden-Württemberg an der technischen Fakultät der Universität in Freiburg statt, und wir scieneers durften dort mit einem Kurs zum Thema "Visualisierungsframeworks in Python" das Angebot für die Teilnehmerinnen mitgestalten.
Konferenz-Rückblick: DataLift Summit
Rückblick zur Konferenz DataLift Summit und Informationen zum dort gehaltenen Workshop zu visueller Datenexploration mit Python
Partnerschaft MPDV – scieneers: MIP smart factory Daten in Power BI
Wir ergänzen die smart factory Plattform MIP unseres Partners MPDV um ein Basis-Lösungspaket in Power BI und der Expertise, auch kundenspezfische Anforderungen sehr schnell in KPIs und Visuals umzusetzen.
PASS Camp 2022 – Ein Einblick
Das PASS Camp fand nach zweijähriger Corona-Pause endlich wieder statt und auch wir waren dabei. In unserem Blog geben wir Euch einen kurzen Einblick.
Voll auf Kurs: optimierte Energieerzeugung dank KI
Datenoptimierte Wärmeprognosen und Fahrplanerzeugung bei KWK-Anlagen - unser spannendes Azure-Daten-Projekt mit Steag New Energies wird hier vorgestellt
Frühlingserwachen 2022
Zwei Tage lang haben wir uns in unserem Kölner Office zusammengefunden, um uns in vier Formaten über fachliche und persönliche Themen auszutauschen und das bisher Erreichte bis in die Abendstunden zu feiern.
BI Consultant Getting Started mit PySpark Notebooks
First steps um als BI Consultant Python zu lernen und in die Ladeprozesse zu integrieren am Beispiel Azure Synapse
Good data quality can save lives
In a pro-bono project facilitated by DataKind we had the great opportunity to join a team of volunteer data scientists to enable the Lwala Community Alliance to monitor the quality of their data.
Our talks at PyCon DE/PyData Berlin
At this year’s PyCon DE & PyData Berlin, we presented our learnings and experiences in two talks. These covered very different aspects of data work: On the one hand, we showcased predictive modeling applications in wind turbine maintenance and the challenges of anomaly detection. In a different presentation, we explained why code reviews are still important for data science tasks and how we can apply them to benefit from the effort.
Live Demo: MIP Daten in Power BI
Live-Demo mit smart factory Shopfloor-Daten verschiedener Maschinen die über die Integrationsplattform MIS von mpdv nach Power BI
Back to School – Einblicke ins Berufsfeld Data Science
Im Rahmen einer Projektwoche an der Königin-Luise-Schule in Köln haben wir uns gefreut, Data Science als verhältnismäßig junges Berufsfeld vorstellen zu dürfen und den Jugendlichen einen Einblick in einen typischen Werdegang und in unseren Berufsalltag zu geben.
Serverless Spark ETL Pipelines und Orchestrierung mit AWS Glue und Step Functions
Für unseren Biotech-Kunden Centogene wurde nach einer leichtgewichtigen Lösung für Spark Jobs gesucht, um die zusätzliche Komplexität von Lösungen wie Google Dataproc oder AWS EMR sowie von manchen Orchestrierungstools zu vermeiden. Unsere Wahl fiel auf AWS Glue und AWS Step Functions.
Review 2021
Wieder ein Jahr mit Corona. Aber auch wieder ein Jahr, in dem wir große Erfolge feiern durften.
Power BI Solution Deutsch
Die Power BI Plattform ist ein zentraler Bestandteil unseres Technologiestacks, wenn es darum geht relevante Informationen effizient, aktuell und verständlich aufzuarbeiten und zu visualisieren. Nutzen Sie diesen Solutions-Showcase, um die Möglichkeiten der Plattform näher kennenzulernen und sich von unseren Lösungskompetenzen zu überzeugen.
Reicht auch Power BI only für mein Projekt?
Fragt sich so mancher Entwickler angesichts immer mehr Funktionsumfang und Enterprise Readyness auf Seiten Microsoft Power BI. Normalerweise beinhalten BI Projekte spezialisierten Komponenten wie zur Persistenz (Datenbanken, Data Lake & co.) oder für ETL. Power BI deckt den kompletten Bereich einer BI Lösung ab. Aber gibt es Dinge die gar nicht gehen in Power BI, wo sind Schwächen und gibt es das typische Power BI Projekt? Dieses spannende Thema wird in der Session diskutiert!
User Behavior in iNaturalist’s City Nature Challenges
At scieneers, social engagement is an important goal that we pursue with value-creating and sustainable projects. We are particularly interested in using our knowledge of data and our technical skills for "data for good" projects and sharing them with others. The following project from the CorrelAid network aims to investigate the internal dynamics of citizen science communities, in particular how users of such communities behave and what roles they take.
Wie finde ich eine zu mir passende Stelle?
Du weißt, dass du im IT Bereich arbeiten möchtest, fragst dich aber, wie du eine Stelle findest, bei der du glücklich wirst?
Genau diese Frage hat mich vor einem Jahr beschäftigt. Nach einem Quereinstieg als Software Entwicklerin stellte ich nach einem guten Jahr Berufserfahrung Unzufriedenheit fest. Um der Ursache auf den Grund zu gehen, befasste ich mich damit, was mir in meinem Job eigentlich wichtig ist -- basierend auf meinen bisherigen Erfahrungen in Studium, Praktika und Beruf.
Realtime Data Integration mit Azure Service Bus & Azure Logic Apps & Dataverse
Realtime Data Integration mit Azure Service us & Azure Logic Apps & Dataverse
Application Lifecycle Management in der Azure Data Factory
Vorstellung von Methoden, Technologien und Best Practices wie man in der Azure Data Factory strukturiert und sicher entwickeln kann, in dem man die Integration und Dienste von Azure DevOps nutzt
Künstliche Intelligenz in der Betriebsoptimierung von erneuerbaren Erzeugungsanlagen bei der EnBW
Die Künstliche Intelligenz und das Maschinelle Lernen wird immer mehr zu einem alltäglichen Begleiter und hält somit auch Einzug in die Energie-Branche. Im Rahmen eines Projekts bei der EnBW stellten wir Untersuchungen zu dem bereits implementiertem Predictive Maintenance System, das Schäden in Erzeugungsanlagen rechtzeitig erkennen soll, an und testeten zusätzlich neuere Algorithmen zur rechtzeitigen Schadenserkennung in Windkraftanlagen.
Advanced security of PaaS based Azure data applications – from setup to ALM
I want to share my experience from my projects of creating data applications from a security perspective, covering cloud infrastructure and application parts, as well as application lifecycle challenges during CI/CD. We‘ll go through examples how to handle secrets savely and manageable and configure Azure resources with diverse security concepts.
Data engineering pattern in der Azure Data Factory
In dem Vortrag werden die typischen Muster für Datenverarbeitung in der Azure Data Factory aufgezeigt und verglichen. Das wird abgerundet mit best practices zum Application Lifecylce Management.
Microsoft Certified Data Monster
In der Aufzeichnung sprechen MVP Frank Geisler und Stefan Kirner über Microsoft Zertifizierungen im Allgemeinen und insbesondere für die Data Platform.
Warum sollte ich mich damit beschäftigen?
Was gibt es für Zertifizierungen von MS im Data Bereich?
Wie geht das mit der Anmeldung?
Wie bereite ich mich darauf vor?
Wie läuft so eine Prüfung ab?
Professionelles Arbeiten mit Jupyter Notebooks/Lab
Materialien zum Vortrag Professionelles Arbeiten mit Jupyter Notebooks/Lab von Nico Kreiling
Five shades of dataflow
Talk is an overview of the "shades" of data flows in Power Platform and Azure Data Factory, their purpose and of course the technologies