HomeNhận diện hình ảnh và hiển thị thông tin máy
| Phạm vi ứng dụng | Lĩnh vực chế tạo, sản xuất, thương mại |
|---|---|
| Công nghệ | Unity, HoloLens, OpenCV, Yolo, OCR |
| Ngôn ngữ lập trình | C# |
| Thời gian thực hiện | Tháng 10 năm 2019 |
| Quy mô dự án | 72 man-month |
Giới thiệu ứng dụng nhận diện hình ảnh
Khách hàng sử dụng HoloLens và khởi chạy ứng dụng để bắt đầu quét và nhận dạng các bộ phận của thiết bị máy móc trong thực tế. Các thông tin kỹ thuật sẽ được hiển thị trong không gian dưới dạng mô hình 3D ngay trên đối tượng.
Ngoài nhận dạng hình ảnh thời gian thực, HoloLens còn có thể quét đọc được các số liệu hiển thị trên các màn hình LCD của thiết bị thực bằng cách nhận dạng ký tự sử dụng công nghệ OCR. Các kết quả này sẽ được lưu và so sánh với các dữ liệu tiêu chuẩn trong ứng dụng HoloLens để xác định kết quả bằng biểu đồ. Bằng chứng công việc cũng được chụp lại từ Camera HoloLens và gửi đến máy chủ đám mây để sao lưu.
Ứng dụng có thể được mở rộng dùng để kiểm tra, giám sát các hệ thống máy móc phức tạp đồng thời hiển thị dữ liệu dạng biểu đồ 3D trực quan hơn. Chia sẻ tầm nhìn với Spectator View.
Đọc số liệu từ máy móc và hiển thị trực quan
Vấn đề của khách hàng
- Các thiết bị, máy móc hiện đại cần thường xuyên giám sát, bảo dưỡng với lượng dữ liệu lớn và nhàm chán.
- Lỗi của con người xảy ra khi đánh giá kết quả của công việc dựa trên nhiều nguồn số liệu khác nhau.
- Nhập kết quả công việc bằng tay. Tốn thời gian và dễ mắc sai lầm.
- Các ứng dụng IoT theo thời gian thực chưa thể đọc được các số liệu trực tiếp từ màn hình máy móc.
Giải pháp đề xuất
- Ứng dụng các công nghệ xử lý thời gian thực về hình ảnh OpenCV, nhận dạng đối tượng Yolo, nhận dạng chữ OCR.
- Mô-đun OCR nhận dạng số kỹ thuật số
- Hiển thị dữ liệu tổng hợp bằng đồ họa 3D trực quan.
- Sử dụng Spectator View để hiển thị và chia sẻ thông tin của người dùng HoloLens với góc nhìn khán giả.
Lợi ích / hiệu quả
Mô-đun OCR nhận dạng số kỹ thuật số với độ chính xác từ 98% trở lên
- Được sử dụng để thuyết trình tại các triển lãm, hội thảo hoặc bối cảnh kinh doanh cho nhiều người xem.
- Chia sẻ tầm nhìn từ thiết bị HoloLens ra màn hình lớn để nhiều người cùng trải nghiệm với chỉ 1 kính HoloLens.
- Quét, tổng hợp và đồ họa hóa các thông số kỹ thuật máy móc và hiển thị theo cách riêng trực quan, thu hút.
ONETECH đã nghiên cứu và phát triển các ứng dụng nhận dạng hình ảnh thời gian thực với OpenCV + AI Yolo. Lần này, chúng tôi sẽ giới thiệu 3 kết quả nghiên cứu và ứng dụng vào thực tiễn để trình bày cho các buổi hội thảo giới thiệu công nghệ của công ty vào năm 2018.
ONETECH phát triển mô-đun ứng dụng OCR tự động phân tích các số trong khung hiển thị của màn hình led phổ biến, sử dụng phương pháp công cụ đo cường độ sáng và SSOCR.
OneTech bắt đầu thực hiện nhiều nhiệm vụ khác nhau để tìm hiểu và phát triển các ứng dụng cho Robot Pepper của Softbank. Dưới đây là công trình nghiên cứu và phát triển một ứng dụng trò chuyện nhận dạng giọng nói thông qua AI.
