(1)صوتتطبيق محمول للصم والبكم يحول االشارات الى

طارق محمد عبدالهادي جابر/ د

مدرس بكلية الحاسبات و المعلومات

بجامعة قناة السويس

(SRGE)عضو بالمجموعة البحثية المصرية

http://www.egyptscience.net

Email: tmgaber@gmail.comIt is based on our paper “”Social network framework for deaf and blind people based on cloud computing”

Prof.Aboul Ella’s Group

22/12/2014 2

Important Notices

• This presentation is delivered at

• The workshop entitled “The Role of Information Technology in Sustainable

Development”, organized by UNESCO, Cairo, Egypt, Feb, 9-13, 2014

• It is also based on our paper:

• El-Gayyar, M.; Elyamany, H.F.; Tarek Gaber ; Hassanien, A.E., "Social network

framework for deaf and blind people based on cloud computing," Computer Science

and Information Systems (FedCSIS), 2013 Federated Conference on , vol., no.,

pp.1313,1319, 8-11 Sept. 2013,

• Available at http://ieeexplore.ieee.org/xpls/abs_all.jsp?arnumber=6644184&tag=1

مقدمة

تقريبا قد يصاب أحدنا باحد اعضاء•

في يوم مندائم مؤقت أو جسمه بشكل

االيام

أ ال يتجزجزء لذا يمكن القول بأن اإلعاقة •

الحالة اإلنسانية من

في العالمعن الوضع لمحة

مليار نسمة7.5إجمالي معاق من شخص مليارنحو •

يكابدون الفقرهائل عدد •

، عياالنعزال االجتماكبير للغاية منهم يعانون من عدد •

ية الكثير منهم من التعليم، والتوظيف والرعايحرم •

.والقانونيالصحية، ونظم الدعم االجتماعي

النامية يعيشون في الدول % 80•

لمحة عن الوضع في مصر

المصريةاالتصاالتوزارةبياناتواقعمن:

بصرية،إعاقةذوالمصرينمن%6حوالييوجد

سمعيةاعاقةذوالمصرينمنمالين3وحوالي

األمم المتحدة و ذوي اإلحتياجات الخاصة

حول 2013األمم المتحدة في شهر اكتوبر عقد اجتماع في •

الشاملة وكان من أهمدمج ذوي اإلعاقة في عمليات التنمية

:التوصيات

القدرات الخاصة أعضاء منتجين في مجتمعاتهم ان يكون ذوي •

وبالدهم

ضرورة وجود التزام عالمي جديد إزاء أصحاب اإلعاقة إلشراكهم •

في النشاط االقتصادي بمختلف البلدان

ي فتكنولوجيا المعلومات لذوي اإلحتياجات الخاصة ضرورة إتاحة •

.العالمجميع أنحاء

UK Case Study • 40% of deaf people could experience mental health

problem at some stages in their lives, compared

with 25% in the hearing community,

• The fact that callers and advisers can see each

other and communicate directly using British Sign

Language allowing a much more good

conversation.

تطبيقات تكنولوجيا المعلومات لذوي اإلحتياجات الخاصة

تطبيقات تكنولوجيا المعلومات لذوي اإلحتياجات الخاصة

Breathing Space• It is a free, confidential phone and web based

service for deaf people in Scotland experiencing

low mood, depression or anxiety.

• People who are feeling down or depressed will

be able to contact the advisers via web cam and

use British Sign Language to discuss their

concerns in confidence.

SignVideo• It was established in 2004, providing an instant

access to highly qualified BSL interpreters

through our designated call center.

• It is used at videophone stations in public

places where Deaf people can communicate

with hearing people via a Video Relay Service

تطبيقات تكنولوجيا المعلومات لذوي اإلحتياجات الخاصة

• Video Relay Service –• Deaf people can make and receive telephone calls in BSL

• Video Remote Interpreting –• Access to a BSL interpreter for last minute or short meetings

• English/BSL Translation –• Translation from written English to BSL and vice versa

• Voice Carry-Over –• Deaf people speaks what they want and then they can receive

responses in BSL.

تطبيقات تكنولوجيا المعلومات لذوي اإلحتياجات الخاصة

SignVideo Services

• SignVideo basic requirements:

• PC with a webcam

• Microsoft Internet Explorer V7 or V8, Firefox 3

• Bandwidth of 256 kbp/s (upload and download)

• No webcam?

• If you do not have a webcam and internet at home,

we have a SignVideo Access Point at:

تطبيقات تكنولوجيا المعلومات لذوي اإلحتياجات الخاصة

•SignVideo adoption Examples: • Lloyds TSB is becoming the first British bank

to offer their Deaf customers to contact them

using BSL.

• British Telecommunication company

• Most of city councils at UK

• https://www.facebook.com/video/video.php?v=1

439626423501

تطبيقات تكنولوجيا المعلومات لذوي اإلحتياجات الخاصة

• To access the service, a deaf customer needs to

• Click on a link on the ‘contact us’ page at the bank’s website.

• Once connected, they can sign to a SignVideointerpreter

• SignVideo will then transmit what is said to the bank’s customer service team.

• http://www.youtube.com/watch?v=p6da1osCt4w&feature=youtu.be

تطبيقات تكنولوجيا المعلومات لذوي اإلحتياجات الخاصة

ال و شبكات االتص)يستخدم تكنولوجيا المعلومات نظام تطوير

:يهدف الي(,3D-Cameraالحوسبة السحابية و نظارة خاصة

ك والصم من جهة و كذلبين المكفوفين التواصل السلس دعم •

مع الناس الطبيعين من جهة اخريتواصلهم

ن انفسهم المتحدث مع المكفوفين الي المكفوفينقل مشاعر امكانية •

رؤيتنا فى التعامل مع ذوي اإلحتياجات الخاصة

رحتصميم للنظام المقت

CloudEucalyptus & Amazon EC2

Emotion Detection

Sign language Text

Audio Sign language

Time-of-flight Camera

Audio / Image

Pictures

ImageBlind mode Deaf mode

Seamless communication

Android & iOS

Sign Language and image

K-fra

mes

Audio

رحتصميم للنظام المقت

CloudEucalyptus & Amazon EC2

Emotion Detection

Sign language Text

Audio Sign language

Time-of-flight Camera

Audio / Image

Pictures

ImageBlind mode Deaf mode

Seamless communication

Android & iOS

Anim

ate

d

Avata

r

تحديات المشروع

التعامل مع اللغة العربية•توحيد لغة اإلشارة المصرية•

تحسين نتائج التعرف علي لغة اإلشارة•

حماية الخصوصية•

تأكيد الهوية للمستخدم •

التنمية المستدامة ودور ذوي اإلحتياجات الخاصة

:دمج ذوي اإلحتياجات الخاصة بالمجتمع له بعدين•

كسر الجدار بين أبناء المجتمع الواحد:بعد إجتماعي•

الخاصة مهارات جديدة اكساب ذوي اإلحتياجات : بعد إقتصادي•

تمكنه من العمل وكسب رزقه

التوصيات

ذويبمتطلباتالمجتمعالفرادتوعيةبرامج•

هذهلتكناألطفالمنبداية الخاصةاإلحتياجات

الصغرزمنثقافتهم

ةاجتماعيعدالةتحقيقشأنةمنقانوناقـتراح•

هحظيأخذلمالجتمعمنلقطاع(مستدامةتنمية)

فيفعالعنصرلجعلهالكافياإلهتماممن

المجتمع

:االتينقترحالمجتمعفيفعالعنصرالخاصةاالحتياجاتذويلجعل

التوصيات

منتوفرهلماالحديثةاللتقنياتاستخدام•

اإلجتياجاتذويمشاكلمعلتعاملامكانيات

الخاصة

كلفيالمعلوماتوالخدماتكافةربط•

اإلجتياجاتبذويالمعنيةالجهاتوالوزرات

الجهودكللتوحيدالخاصة

التوصيات

ويونيةالتلفيزالبرامجفياإلشارةللغةالترجمةزيادة•

اليومالجرائدفي

ذويمعالتعاملكيفةعليالمدرسينتدريبوتعليم•

البالطوبينبينهمالتميزوعدمالخاصةاإلجتياجات

العادين

Authors

Mahmoud ElGayyar, Hany ElYamany, Tarek Gaber, and Aboul Ella Hassanien

Thanks for your attention

Authors

Mahmoud ElGayyar, Hany ElYamany, Tarek Gaber, and Aboul Ella Hassanien