Benutzer-Werkzeuge

Webseiten-Werkzeuge


Seitenleiste

ws1920:bildanalyse_mit_machine_learning

Hinweis von Stefan Born Methoden keras/tensorflow und 'convolutional neural networks'.

Schrifterkennung. Formel erkennen und in LaTeX konvertieren

Wir wollen mithilfe von machine learning(bzw. Neural Network) ein Programm erstellen, dass bestimmte Elemente auf Bildern erkennt und dieser einordnen kann.

Idee Nummer 1: Umwandlung von Bildern in einen anderen Stil, z.B von einem Künstler oder so wie ein Photoshop Filter (z.B. Comic Filter, nicht nur Kontrast hoch.). Das gibt es allerdings schon.
Idee Nummer 2: Bot programmieren, der die google recaptchas erkennen und lösen kann. Der vorteil ist, dass es einen sehr großen Datensatz gibt. Allerdings sind die recaptchas genau so designt, dass sie Menschen von Bots unterscheiden können.
Idee Nummer 3: Schrifterkennung. Handgeschriebene mathematische Formeln erkennen und in LaTeX-Formel konvertieren.

Wir haben uns für Idee Nummer 3 entschieden.


Quellen/Ressourcen/Themen:

Journal

28.11.2019
Information zur Machine Learning und Neural Network gesammelt.

05.12.2019
Heute haben wir die Ergebnisse von den letzten zwei Wochen zusammengetragen und damit angefangen ein Programm zu modellierten mit Hilfe von BuildYourOwnMashineLearningClass.ipynb.

12.12.2019
- „Training a Binary Classifier“ Beispiel aus dem Buch „Hands-On Machine Learning“ ausprobiert
- Besprechung und Planung
- Netzwerk Grundlagen aufbauen und erste Trainingsdaten ausprobiert
- Aufteilung: Information über CNN aussuchen, Schnittstelle zu LaTeX, Schnittstelle von Bildverarbeitung zu CNN

09.01.2019
Diese Woche haben wir Hasyv2-Datensatz heruntergeladen. Hasyv2 ist ein Datensatz, der sowohl Daten über handschriftliche Zahlen, als auch Mathefunktionen beinhaltet. Der Latex-Code für die jeweiligen Zahlen bzw. Zeichen sind auch schon vorhanden.

Programmaufbau,Aufgaben aufteilen

23.1.2020

30.1.2020
- Arbeiten an der Einbindung von Hasyv2-Datensatz
- Erstellung von Vektoren, um „mean-square-error“ Funktion später anwenden zu können

ws1920/bildanalyse_mit_machine_learning.txt · Zuletzt geändert: 2020/01/30 16:34 von h-y.lee890428