Chiếc nón thần kỳ biến thủ ngữ thành lời nói - sinh viên Bách Khoa làm được rồi đây! ✨

25dd03f5922b5ae52590.webp


59528f56af82393b8f45.jpg


6 bạn sinh viên trường ĐH Bách Khoa (ĐHQG TP.HCM) vừa cho ra lò một thiết bị xịn sò dùng AI để "dịch" ngôn ngữ ký hiệu (thủ ngữ) thành giọng nói và chữ viết luôn nè! Nhờ đó mà các bạn khiếm thanh và khiếm thính có thể giao tiếp với mọi người dễ dàng hơn nhiều

Nhóm nghiên cứu gồm: Nguyễn Quang Đức, Lê Đỗ Thanh Bình, Phan Quốc Long, Nguyễn Thành Lưu, Bùi Ngô Hoàng Long (cùng khóa 2018, khoa Khoa học và Kỹ thuật Máy tính) và Cao Khánh Gia Hy (khóa 2020, khoa Quản lý Công nghiệp).

Theo team leader Nguyễn Quang Đức share, nước mình hiện có khoảng 1 đến 2,5 triệu người khiếm thanh và khiếm thính (bằng dân số cả một tỉnh luôn đó!) Nhưng mà số phiên dịch viên ngôn ngữ ký hiệu thì... quá ít ỏi. Riêng Hà Nội chỉ có 6 người đạt trình độ dịch được các lĩnh vực chuyên môn, cả nước cũng chỉ khoảng 10 người thôi.

Hiện tại, các bạn khiếm thanh, khiếm thính vẫn đang dùng thủ ngữ (ngôn ngữ ký hiệu Việt Nam) để giao tiếp hàng ngày. Nhưng cách này có nhiều hạn chế lắm: người đối diện phải biết thủ ngữ mới hiểu được, mất thời gian, lại dễ nhầm lẫn nữa. Đặc biệt là nhu cầu cao nhưng trung tâm dạy thủ ngữ thì lại rất hiếm

3feaed5b941440aeeb1a.jpg


Bạn Đức giải thích, dự án "Thiết bị giao tiếp thông minh dành cho người khiếm thanh, khiếm thính – Speak your mind" (SYM) là một thiết bị xịn xò sử dụng công nghệ AI để chuyển ngôn ngữ ký hiệu thành văn bản và giọng nói phát ra từ smartphone. Nghe đã cool chưa! ✨

Sản phẩm này là combo thiết bị + phần mềm thông minh giúp người khiếm thanh có thể tương tác với mọi người dễ dàng hơn nhiều bằng cách "dịch" thủ ngữ thành văn bản và giọng nói. Thiết bị gồm 2 phần chính: module camera gắn trên nón và ứng dụng trên Android.

Theo bạn Hoàng Long giải thích cơ chế hoạt động: chuỗi hình ảnh thủ ngữ từ camera sẽ đi qua bộ nhận diện các điểm chốt của bàn tay MediaPipe của Facebook, rồi được trích xuất thành các đặc trưng. Mô hình AI đã được train sẵn bằng mạng học sâu sẽ dự đoán từ tương ứng. Kết quả sẽ xuất ra dưới dạng văn bản và giọng nói thông qua Text2Speech API của Google. Nghe phức tạp nhưng xài thì ez lắm!

ae82ce7dced951c6c0e0.jpg


Camera mini cùng các linh kiện điện tử được nhét gọn trong hộp nhựa gắn vào nón người dùng. Điểm cộng nữa là vật liệu dùng nhựa sinh học (Polylactic Acid – PLA) không độc hại, không ảnh hưởng sức khỏe và dễ phân hủy, thân thiện môi trường nha! ♻️

Cách dùng cũng đơn giản lắm: chỉ cần bấm nút khởi động, camera sẽ ghi hình và chuyển vào app đã cài sẵn trên smartphone. App sẽ xử lý và chuyển dòng hình ảnh thủ ngữ thành văn bản + giọng nói hiện lên màn hình và phát ra loa. Vậy là người đối diện có thể hiểu ngay mà không cần học thủ ngữ!

Bonus thêm là app còn có chức năng lưu lại thủ ngữ kèm văn bản và phát âm. Ai muốn học thủ ngữ thì lưu bài học cực thuận tiện luôn. Tức là hệ thống này vừa là thiết bị dịch, vừa là app học thủ ngữ siêu hiệu quả đấy!

Target khách hàng trong 3 năm tới là các bạn khiếm thanh, khiếm thính và phụ huynh của các bạn này tại Việt Nam.

Theo đánh giá của team tư vấn gồm TS Võ Thanh Hằng (Khoa Môi trường và tài nguyên) và TS Quản Thành Thơ (Phó Khoa Khoa học và kỹ thuật máy tính), điểm độc đáo của SYM là toàn bộ sản phẩm được code bằng tiếng Việt, xài dễ vô cùng. Hơn nữa, thiết bị còn tích hợp nhiều ngôn ngữ khác đáp ứng đa dạng đối tượng khách hàng nữa!

Quang Đức cho biết thêm, giá thành sản phẩm rẻ cũng là điểm mạnh của dự án: "Nhóm người điếc/khiếm thính có thu nhập bình quân cao nhất ở mức 3 triệu đồng một tháng, so với mức thu nhập chung trên cả nước 5,4 triệu đồng một tháng."

3393f7134a6b590c193c.jpg


Dựa vào chi phí cố định 1 sản phẩm (dao động khoảng 405.600 VND) và chi phí biến động, phân khúc thị trường cùng những dòng sản phẩm cạnh tranh, SYM định giá chỉ từ 800.000 – 1 triệu đồng thôi. Giá mềm vô cùng!

Một nghiên cứu tiến hành tại Hà Nội, Thái Nguyên, Nghệ An, TP.HCM và Đà Nẵng năm 2017 với 574 người khuyết tật chỉ ra rằng những người khuyết tật nói chung, người khiếm thanh, khiếm thính nói riêng rất khó khăn để tiếp cận các dịch vụ y tế, giáo dục, tỷ lệ thất nghiệp cao, cảm nhận bị kỳ thị ảnh hưởng đến đời sống vật chất, tinh thần. Vì vậy dự án này thực sự ý nghĩa và cần thiết! ❤️

Hiện tại dự án đang tham gia cuộc thi "Sinh viên với quyền sở hữu trí tuệ S&IP" năm 2021 với chủ đề "Từ ý tưởng đến cơ hội kinh doanh" do Trung tâm Sở hữu trí tuệ và Chuyển giao Công nghệ (IPTC) ĐHQG TP.HCM phối hợp cùng Khu Công nghệ phần mềm (Khu CNPM) ĐHQG TP. HCM và Trung tâm Nghiên cứu Đào tạo và Hỗ trợ tư vấn, Cục Sở hữu trí tuệ, Bộ KH - CN tổ chức.

Chúc nhóm SYM thành công và sớm đưa sản phẩm đến tay người dùng nhé!

5d53b1e9bc81876b0094.jpg


3e198e87e21e66f3b198.jpg


ad4770eb5644e8ac72d5.jpg


Nguồn: svvn.tienphong.vn
 
Back
Top