234-235 / 568
אלברט
אבדלים
אבדלימוב
: מנחה
מר זוהר דביר
הנדסת חשמל
פיתוח מערכת ייעודית להפעלה קולית של רובוט
מסוג
Meccanoid G15 KS
הפרויקט
עוסק
בפיתוח
מערכת
לזיהוי
דיבור
אשר
מתממשקת
למערכת
תפעול
מנועי
הרובוט
Meccanoid G15 KS
,
המחליפה
הבקר את
הקיים
-ה, עליו
MeccaBrain
.
המערכת
כוללת
מגוון
פקודות
שמע
, לזיהוי
המחולקות
לתפריטים
,
האחראיות
לתנועת
כל
מנועי
. הרובוט
זיהוי
הדיבור
תומך
בשתי
. שפות
מטרת הפרויקט היא פיתוח אב טיפוס להוכחת התכנות של מערכת לזיהוי דיבור מבוססת חומרה
הכוללת פקודות קוליות
,
באנגלית ובעברית
,
אשר תחובר למערכת שליטה ובקרה
open-source
להפעלת המנועים
,
אשר
מפותחת במכללה
.
שילוב מערכת זיהוי הדיבור כחלק ממערכת שליטה
ובקרה הופכת אותה להיות חלק אינטגרלי של הרובוט
.
התקשורת בין שני המערכות מבוצעת על ידי פרוטוקול תקשורת קווי
–
, טורי
UART - Universal
Asynchronous Receiver Transmitter
.
על ידי אות בקרה הנשלח בפרוטוקול זה
,
נוצר תיאום וסנכרון
מלא בין ניתוב המצבים במערכת השליטה ובקרה לבין ניתוב בתפריטים במערכת לזיהוי דיבור
.
המערכת לזיהוי דיבור ממומשת על גבי כרטיס פיתוח אלקטרוני נייד
,
SmartVR
של חברת
VeeaR
,
בעל מעבד
DSP
ייעודי לזיהוי דיבור
,
RSC-4128
של חברת
Sensory
.
זיהוי הדיבור מתבצע בזמן אמת
כאשר המעבד משתמש במודל סטטיסטי מסוג
HMM
על מנת לזהות את המשפט שנאמר עפ
"
י מודל
אקוסטי מתאים הנבנה מ
'
. ' פונמות
המשתמש מקבל אישור לזיהוי הדיבור ע
"
י נורות לד ומענה קולי
.
תרשים הארכיטקטורה
(Block Diagram)
של כלל המערכת
:
תוצרי הפרויקט
:
.1
התוצר הראשון הינו מערכת לזיהוי דיבור
.
המערכת תומכת בשתי שפות
,
( אנגלית
ברירת מחדל
)
ועברית
,
ומכילה מילת דרבון המובילה לבחירה בין ארבעה תפריטים כאשר בכל תפריט ישנם
לפחות שלוש פקודות
.
המערכת מזהה את תפריטי המילים ללא תלות בדובר
.
המערכת מבצעת
את הזיהוי בזמן אמת ובעלת אחוזי הצלחה גבוהים בסביבה שקטה
(
תנאים אופטימליים
)
ואחוזי
הצלחה טובים בסביבה שאינה אידיאלית
(
רועשת
.)
.2
התוצר השני
,
תוצר הפרויקט הסופי
,
הינו שילוב המערכת לזיהוי דיבור במערכת
open-source
המפותחת במכללה אשר אחראית לבקרת מנועי הרובוט
.
המערכת המשולבת מהווה אב טיפוס
להוכחת התכנות למערכת זיהוי דיבור אשר מפעילה את הרובוט במגוון פקודות בשתי שפות
,
ללא
כל שימוש בבקר המערכת המקורי
-ה,
MeccaBrain
.
המערכת לזיהוי דיבור ממוקמת על גבי
הרובוט וניתנת להפעלה וכיבוי ע
י מתג "
.
תפריט למשתמש בשפה באנגלית
:
תפריט למשתמש בשפה העברית
:
AFALA KOLIT
BAKARAT
ROSH
PKUDOT
KLALIOT
BAKARAT
ZRO’OT
BAKARAT
TNUA
KADIMA
YAMINA
SMOLA
REVERSE
MA A SHA
'
A
SHEM
SOVEV
YAMINA
YETZIA
Hi SMOL
Hi YAMIN
YETZIA
SMOL
YAMIN
ATZOR
SOVEV
SMOLA
ATE SMOLA
ATE YAMINA
YETZIA
SHANE SAFA
Activate
voice control
Head
control
General
Commands
Hands
Commands
Motion
Control
Go forward
Turn right
Turn left
Go backward
Time
Name
Turn right
Exit
Hi left
Shake left hand
Hi right
Shake right
handExit
Left
Right
Stop
Turn left
Left down
Left up
Exit
Change
language