OCR tiếng Trung: chuyển ảnh thành chữ kèm pinyin

Những gì công cụ đọc tốt

Trang này đọc chữ tiếng Trung từ ảnh và viết pinyin phía trên từng chữ. Nó được làm cho ảnh chụp màn hình và chữ in rõ nét: tin nhắn trò chuyện, trang web, màn hình ứng dụng, sách điện tử, phụ đề, trang trình chiếu và trang quét, bằng chữ giản thể hoặc phồn thể, trên nền sáng hoặc nền tối.

Trong thử nghiệm của chúng tôi với mười một ảnh chụp màn hình, một số có chữ nhỏ đến 12 pixel, công cụ đọc đúng 826 trên 834 chữ Hán. Chữ và chữ số viết bằng chữ cái Latinh cũng được hiển thị, không kèm pinyin.

Ảnh chụp đọc tốt khi chữ là chữ in và chiếm gần hết bức ảnh: một tờ thông báo, một nhãn hàng, một trang sách, một tấm biển riêng lẻ. Thực đơn xếp thành cột hay một con phố đầy biển hiệu sẽ cho ra các dòng bị lẫn lộn, nên với những trường hợp đó, hãy hướng camera của ứng dụng HanCam vào đúng dòng bạn cần. Chữ viết tay và chữ xếp theo đường cong phần lớn bị bỏ sót.

Những chỗ công cụ còn yếu

Bộ nhận dạng tìm các dòng chữ và đọc từng dòng một. Nó không hiểu bức ảnh. Trong những trường hợp sau, chữ có thể bị sai hoặc bị sót:

• Chữ in đè lên một hình nền rối là trường hợp yếu đã biết: có chữ bị sót và có chữ lạ xuất hiện. Trang đánh dấu vạch đỏ ở những dòng nó không chắc, nhưng không phải dòng sai nào cũng có vạch.
• Chữ viết tay, thư pháp, chữ kiểu bút lông và chữ xếp theo đường cong. Bộ nhận dạng được làm cho chữ in và chữ trên màn hình. Với một thực đơn viết tay trong thử nghiệm của chúng tôi, nó bỏ sót nhiều chữ và bịa ra những chữ khác.
• Chữ xếp thành cột, như bảng thực đơn, cho ra từng dòng chạy ngang qua các cột, các dòng bị lẫn lộn.
• Chữ hiếm gặp. Bộ nhận dạng nhỏ dùng cho văn bản giản thể biết khoảng 6.900 chữ và thay bất kỳ chữ nào khác bằng một chữ trông tương tự. Hãy chọn Phồn thể để dùng bộ nhận dạng lớn hơn, biết khoảng 18.000 chữ và đọc được cả chữ giản thể.

Công cụ hoạt động thế nào, và tải về những gì

Việc đọc diễn ra trên chính thiết bị của bạn. Khi bạn chọn ảnh đầu tiên, trang tải về một bộ nhận dạng chữ: khoảng 10 MB, và thêm khoảng 17 MB vào lần đầu gặp chữ phồn thể. Trình duyệt giữ lại các tệp này, nên những ảnh sau không cần tải gì nữa. Bản thân bức ảnh được xử lý bên trong thẻ trình duyệt. Ảnh không bị tải lên và không được lưu lại.

Pinyin đến từ cùng bộ chuyển đổi với công cụ phiên âm tiếng Trung sang pinyin trên trang web này. Nó chọn cách đọc dựa trên ngữ cảnh và phần lớn là đúng, nhưng chữ có nhiều cách đọc có thể bị sai, và chữ bị đọc nhầm sẽ nhận pinyin của chữ sai đó.

Bộ nhận dạng được xây dựng trên các mô hình PP-OCR của PaddleOCR (Apache License 2.0), chạy bằng ONNX Runtime Web (MIT License). Nguồn và giấy phép

Chữ tiếng Trung ngay trước mặt bạn: hãy dùng camera

Trang này cần một tệp ảnh. Với biển hiệu, thực đơn hay trang sách ngay trước mặt bạn, HanCam đọc chữ tiếng Trung trực tiếp từ camera của iPhone hoặc iPad và hiển thị chữ Hán cùng pinyin có dấu thanh, và nghĩa. Ứng dụng cũng đọc được ảnh trong thư viện của bạn. Nghĩa được hiển thị bằng ngôn ngữ của điện thoại nếu tính năng dịch trên thiết bị của Apple có hỗ trợ, nếu không thì bằng tiếng Anh.

Hỏi và đáp