Deteksi Bahasa Isyarat Menggunakan Tensorflow Lite dan American Sign Language (ASL)

Jurnal Krisnadana Pub Date : 2024-01-28 DOI:10.58982/krisnadana.v3i2.534

I. Bagus, Adisimakrisna Peling, Made Pasek, Agus Ariawan, Gde Brahupadhya Subiksa

{"title":"Deteksi Bahasa Isyarat Menggunakan Tensorflow Lite dan American Sign Language (ASL)","authors":"I. Bagus, Adisimakrisna Peling, Made Pasek, Agus Ariawan, Gde Brahupadhya Subiksa","doi":"10.58982/krisnadana.v3i2.534","DOIUrl":null,"url":null,"abstract":"Bahasa isyarat merupakan suatu bahasa yang menggunakan gerak tubuh seperti gerakan tangan dan wajah. Setiap negara memiliki Bahasa Isyarat yang berbeda di Indonesia sendiri ada 2 jenis bahasa isyarat yaitu Bahasa Isyarat Indonesia (BISINDO) serta Sistem Isyarat Bahasa Indonesia (SIBI), sedangkan di Amerika memiliki bahasa isyarat yaitu American Sign Language (ASL). Saat ini masih banyak orang yang tidak mengerti dengan bahasa isyarat dari lawan bicaranya. Hal ini disebabkan karena bahasa isyarat tidak digunakan oleh masyarakat non-disabilitas. Penelitian ini bertujuan untuk merancang sebuah sistem penerjemah bahasa isyarat berbasis Computer Vision dengan menggunakan Tensorflow lite serta dataset bahasa isyarat ASL untuk mendeteksi gerakan dari kata dan huruf alfabet ASL dengan menggunakan kamera dari laptop atau komputer yang berguna untuk mempermudah masyarakat dalam mempelajari bahasa isyarat. Hasil pengujian pertama dengan 11 data uji memperoleh nilai akurasi sistem dalam pengujian ini adalah 81%. Hasil Pengujian kedua menggunakan 26 data uji memperoleh nilai akurasi sistem dalam pengujian ini adalah 73%. Dari hasil pengujian sistem ini dapat disimpulkan bahwa sistem ini memiliki tingkat akurasi yang cukup baik dalam mendeteksi kata dan huruf abjad.","PeriodicalId":166888,"journal":{"name":"Jurnal Krisnadana","volume":"10 2","pages":""},"PeriodicalIF":0.0000,"publicationDate":"2024-01-28","publicationTypes":"Journal Article","fieldsOfStudy":null,"isOpenAccess":false,"openAccessPdf":"","citationCount":"0","resultStr":null,"platform":"Semanticscholar","paperid":null,"PeriodicalName":"Jurnal Krisnadana","FirstCategoryId":"1085","ListUrlMain":"https://doi.org/10.58982/krisnadana.v3i2.534","RegionNum":0,"RegionCategory":null,"ArticlePicture":[],"TitleCN":null,"AbstractTextCN":null,"PMCID":null,"EPubDate":"","PubModel":"","JCR":"","JCRName":"","Score":null,"Total":0}

引用次数: 0

Abstract

Bahasa isyarat merupakan suatu bahasa yang menggunakan gerak tubuh seperti gerakan tangan dan wajah. Setiap negara memiliki Bahasa Isyarat yang berbeda di Indonesia sendiri ada 2 jenis bahasa isyarat yaitu Bahasa Isyarat Indonesia (BISINDO) serta Sistem Isyarat Bahasa Indonesia (SIBI), sedangkan di Amerika memiliki bahasa isyarat yaitu American Sign Language (ASL). Saat ini masih banyak orang yang tidak mengerti dengan bahasa isyarat dari lawan bicaranya. Hal ini disebabkan karena bahasa isyarat tidak digunakan oleh masyarakat non-disabilitas. Penelitian ini bertujuan untuk merancang sebuah sistem penerjemah bahasa isyarat berbasis Computer Vision dengan menggunakan Tensorflow lite serta dataset bahasa isyarat ASL untuk mendeteksi gerakan dari kata dan huruf alfabet ASL dengan menggunakan kamera dari laptop atau komputer yang berguna untuk mempermudah masyarakat dalam mempelajari bahasa isyarat. Hasil pengujian pertama dengan 11 data uji memperoleh nilai akurasi sistem dalam pengujian ini adalah 81%. Hasil Pengujian kedua menggunakan 26 data uji memperoleh nilai akurasi sistem dalam pengujian ini adalah 73%. Dari hasil pengujian sistem ini dapat disimpulkan bahwa sistem ini memiliki tingkat akurasi yang cukup baik dalam mendeteksi kata dan huruf abjad.

查看原文本刊更多论文

使用 Tensorflow Lite 和美国手语 (ASL) 检测手语

手语是一种使用手势和面部动作的语言。每个国家都有不同的手语，印度尼西亚有两种手语，即印度尼西亚手语（BISINDO）和印度尼西亚手语系统（SIBI），而美国有一种手语，即美国手语（ASL）。目前，仍有许多人听不懂对话者的手语。这是因为非残疾人不使用手语。本研究旨在设计一个基于计算机视觉的手语翻译系统，使用 Tensorflow lite 和 ASL 手语数据集，利用笔记本电脑或计算机上的摄像头检测 ASL 字母表中单词和字母的移动，这对方便人们学习手语非常有用。第一次测试使用了 11 个测试数据，系统准确率为 81%。第二次测试使用了 26 个测试数据，系统准确率为 73%。从该系统的测试结果可以得出结论，该系统在检测单词和字母方面具有相当高的准确度。

本文章由计算机程序翻译，如有差异，请以英文原文为准。

求助全文

约1分钟内获得全文求助全文

来源期刊

Jurnal Krisnadana

自引率

0.00%

发文量