OCR Chinesisch: Text aus Bildern mit Pinyin

Was gut gelesen wird

Diese Seite liest chinesischen Text aus einem Bild und schreibt das Pinyin über jedes Schriftzeichen. Sie ist für Screenshots und klar gedruckten Text gemacht: Chatnachrichten, Webseiten, App-Bildschirme, E-Books, Untertitel, Folien und gescannte Seiten, in vereinfachtem oder traditionellem Chinesisch, auf hellem oder dunklem Hintergrund.

In unserem Test mit elf Screenshots, einige davon mit nur 12 Pixel kleiner Schrift, las sie 826 von 834 chinesischen Schriftzeichen richtig. Text und Ziffern in lateinischer Schrift werden ebenfalls angezeigt, ohne Pinyin.

Fotos werden gut gelesen, wenn der Text gedruckt ist und den größten Teil des Bildes füllt: ein Aushang, ein Etikett, eine Buchseite, ein einzelnes Schild. Eine Speisekarte in Spalten oder eine Straße voller Schilder kommt mit durcheinandergeratenen Zeilen heraus. Richte dann die Kamera der HanCam-App auf die eine Zeile, die du brauchst. Handschrift und Schrift im Bogen werden meist nicht erkannt.

Wo die Erkennung schwach ist

Die Texterkennung findet Textzeilen und liest sie nacheinander. Sie versteht das Bild nicht. In diesen Fällen musst du mit falschen oder fehlenden Schriftzeichen rechnen:

• Text über einem unruhigen Bild ist die bekannte Schwachstelle: Schriftzeichen fehlen, und es tauchen fremde auf. Die Seite markiert Zeilen, bei denen sie unsicher war, mit einem roten Balken, aber nicht jede falsche Zeile bekommt einen.
• Handschrift, Kalligrafie, Pinselschrift und Text im Bogen. Die Texterkennung ist für gedruckten Text und Text auf Bildschirmen gemacht. Auf einer handgeschriebenen Speisekarte fehlten im Test viele Zeichen, andere waren erfunden.
• Text in Spalten, etwa auf einer Menütafel, kommt Zeile für Zeile quer über die Spalten heraus, die Zeilen durcheinander.
• Seltene Schriftzeichen. Die kleine Texterkennung für vereinfachten Text kennt etwa 6.900 Schriftzeichen und ersetzt jedes andere durch ein ähnlich aussehendes. Wähle Traditionell, um die größere Texterkennung zu nutzen: Sie kennt etwa 18.000 Schriftzeichen und liest auch Vereinfachtes.

Wie es funktioniert und was geladen wird

Die Erkennung läuft auf deinem eigenen Gerät. Wenn du dein erstes Bild auswählst, lädt die Seite eine Texterkennung herunter: etwa 10 MB, und etwa 17 MB mehr, wenn sie zum ersten Mal auf traditionelle Schriftzeichen trifft. Dein Browser behält diese Dateien, spätere Bilder brauchen also keinen Download. Das Bild selbst wird im Browser-Tab verarbeitet. Es wird nicht hochgeladen und nicht gespeichert.

Das Pinyin kommt aus demselben Konverter wie das Tool für Chinesisch in Pinyin auf dieser Website. Er wählt die Lesungen aus dem Zusammenhang und liegt meistens richtig, aber ein Schriftzeichen mit mehr als einer Lesung kann falsch herauskommen, und ein falsch gelesenes Schriftzeichen bekommt das Pinyin des falschen Schriftzeichens.

Die Texterkennung beruht auf den PP-OCR-Modellen von PaddleOCR (Apache License 2.0), ausgeführt mit ONNX Runtime Web (MIT License). Quellen und Lizenzen

Chinesisch direkt vor dir: Nimm die Kamera

Diese Seite braucht eine Bilddatei. Bei einem Schild, einer Speisekarte oder einer Seite direkt vor dir liest HanCam Chinesisch direkt mit der Kamera deines iPhone oder iPad und zeigt die Schriftzeichen mit Pinyin und Tonzeichen und der Bedeutung. Die App liest auch ein Foto aus deiner Mediathek. Die Bedeutung erscheint in der Sprache deines Telefons, sofern Apples Übersetzung auf dem Gerät sie anbietet, andernfalls auf Englisch.

Fragen und Antworten