사회자가 앞을 가리키며 칭찬하는 손짓을 했다. "안녕하세요" 라는 단어는 곧 App 의 "조정" 인터페이스에 반영됩니다. 손 동작 근전도 신호를 포착한 것은 진행자의 팔에 있는 검은색 완장으로 달리기용 손목띠처럼 보인다.
손소리' 는 실어증 인구를 겨냥한 소종 제품으로 올해 5 월 하순에 온라인 상태가 될 것으로 예상된다. 일반인은 이 제품의 의미를 상상하기 어려울 수 있다. 수화는 실어증 환자가 서로 소통하는 다리이지만 일반인에게는 모든 외국어보다 어렵고,' 손소리' 는 유창하고 소리 없는 교류 다리가 될 것이다.
수성창시자, 수성연합 창시자 황씨는 북항 20 12 급 학생이다. 그들은 기숙사에서 가장 친한 친구이다. 정력이 왕성한 두 소녀가 20 15 에서 실어증 환자를 위해 뭔가를 하기 시작했다.
한 행사에서 왕나나는 베이징연합대학교 특수교육학원을 졸업한 실어증 환자 장권을 만나 좋은 친구가 됐다. 왕나나는 수화를 할 줄 모르기 때문에, 이 두 진정한 친구는 네티즌과 더 잘 어울리며, 심지어 만날 때도 위챗 교류를 자주 한다.
기숙사로 돌아오자 왕나나는 장씨에게 쿤의 이야기를 했다. 그 이후로, 그들은 더 많은 실어증 환자를 알게 되었고, 교류가 점점 어려워지고 있다는 것을 깨달았다. "때때로 나는 말할 때 그들을 해치고 있다고 생각한다. 즐거운 대화를 나눌 때, 나는 내가 그들을 소홀히 했는지, 심지어 자책까지 했는지 의심스럽다. " 왕나나가 말했다.
두 친절한 소녀는 장권이 실어증 환자 중 행운아라고 생각했고, 학교도 갈 수 있을 뿐만 아니라 일도 할 수 있었다. 더 많은 실어증 환자는 줄곧 교류로 소외된 사람들이다. 그들은 사장이 회의를 듣지 못하고 상점과 소통할 수 없다고 가정했다. 다른 사람이 어떻게 그들을 받아들일 수 있습니까? 뉴스연합방송' 에는 수화 동시통역이 있지만, 다른 생방송 프로그램의 자막이 없으면 실어증 환자는 영원히 즐길 수 없다.
인터넷에서 조사한 결과, 중국의 실어증 환자 (청각 장애인, 뇌졸중 환자, 뇌성 마비 환자, 냉동인 환자 포함) 가 7000 만 명으로 전체 인구의 5% 를 차지하는 것은 매우 큰 숫자다.
두 사람은' 풍여베' 에 참가했을 때의 이미지 인식 프로젝트를 떠올렸다. 당시 이 프로젝트는 1 등상을 받았는데, 아마도 이 기술은 실어증 환자를 돕는 데 사용될 수 있을 것이다. 왕나나는 이렇게 회상했다. "우리는 아무도 발견하지 못한 수요를 발견했다고 생각한다. 우리는 이 수요를 처음으로 실현하는 사람이 되고 싶다. 또한 우리의 지식을 가치 있게 만들고 싶다. (윌리엄 셰익스피어, 햄릿, 지식명언)."
그래서 그들은 수화 번역의 타당성을 연구하기 시작했고, 논문을 조사하고, 실험을 하고, 코드를 쓰고, 풍여베의 1 등상 5 만원을 시동 자금으로 삼아 행동하기 시작했다. 카메라가 언제든지 휴대할 수 없기 때문에 이미지 인식이 거부되었습니다. 장갑은 너무 눈에 띄어 거절당했고, 결국 완대를 통해 근전신호를 포착하는 방법을 확정했다. 스마트시계가 보편화되면서 실어증 환자에게는 완장을 착용하는 것이 갑작스럽지 않은 것 같다.
제품이 한 번 반복되는 것은 실어증 환자의 존엄성을 보호하기 위해서이다. 황창은 그들이' 실어증의 하루 체험' 활동을 한 것을 기억한다. 편의점에서는 결제할 때 가격을 알아야 하기 때문에 실어증 환자는 휴대전화를 통해서만 점원과 소통할 수 있고, 뒤에 오랫동안 서 있던 사람들은 조급하게 돌진하기 시작했다. "다른 사람이 내가 실어증 환자라는 것을 알면 이해할 수 있지만, 모르면 불평한다. 그들이 불평할수록 나는 더욱 조급해진다. " 일부 실어증 환자들은 다른 사람이 그들을 귀머거리라고 부르는 것을 원하지 않지만, 그들은' 용인' 을 쓸 것이다.
R&D 방향을 결정한 후, 데이터를 지속적으로 입력하고, 데이터를 디버깅하고, 수화 번역의 정확성을 보장하는 것이 관건이다. 모델의 신뢰성을 테스트하기 위해 처음에는 수화 데이터를 기록하는 사람이 두 명뿐이었는데, 그들은 하루 종일 쉬지 않고 동작을 했다. 황창은 농담으로 말했다: "연습하면 유니콘 팔이 된다!"
"당신이 정말로 그들을 도울 때, 그들은 그것이 그들을 위해 좋다는 것을 알게 될 것이고, 그들은 매우 협력할 것이다." 왕나나는 데이터의 다양성을 보장하기 위해 실어증 환자를 정말 좋아하게 했다고 말했다. 이들은 나중에 천진이공대 청각 장애인 공학연구소에 연락해 스마트팔의 데이터 수집과 폐쇄 루프 개발을 공동으로 진행한 뒤 베이징시 조양구 잔해와 협력 의사를 밝혀 손성제품의 서비스에 대한 상담과 지도를 제공했다. 장권도 이 팀의 고문이 되었다.
오늘날' 수화어' 는 200 개의 수화 동작을 다루고 있다. 정확성을 보장하기 위해 각 동작마다 65,438+0,000 명을 기록했다. 자체 제스처 데이터베이스를 통해 팀은 현재 가장 널리 사용되는 신경망 모델 중 하나인 7 층 BP 신경망 (오차 역전파 알고리즘 훈련의 다중 계층 피드 포워드 네트워크) 을 구축하여 데이터 속도를 훈련시켰습니다. 현재 식별 정확도는 이미 95% 에 달했다.
지난해 8 월까지 팀에는 왕나나와 황시원한 두 사람만 있었고, 이후 다른 사람들은 점차 합류했다. 그들은 사무실이 없고, 회의는 모두' 게릴라전' 이고, 카페, 식당, 교실은 모두 징용되고, 연구개발은 모두 자신의 실험실에 있지만, 왕나나는 "우리는 하루도 포기할 생각을 하지 않았다" 고 말했다. 나중에 팀의 일부 구성원은 출국으로 퇴출되었다. 왕나나는 베이징항공우주대학에서 계속 공부하고 황쾌는 칭화대학교에 갔다. 뛰어난 학생, 두 여자, 심학으로 팀을 포기하지 않고 인재 개발 제품을 꾸준히 유치하고 있다.
여학생이 이끄는 기술창업팀은 드물고, 두 사람도 연마를 경험한 적이 있다. 처음에는 황시원이 양측이 냉정해지기를 기다리며 의견이 다를 때 기숙사로 돌아가 소통한다. 왕나나는 팀 소통이 사람이 아니라 사물에 관한 것이라고 말했다. 우리는 서로 마음을 열어야 한다. 이제 두 사람은 한 가지 일에 대해' 네가 죽고 산다' 는 토론을 할 수 있고, 합의가 이뤄지면 손을 잡고 밥을 먹고 술을 마실 수도 있다. 팀에는 또 다른 기술자가 있다. 사람들이 밤을 새워 코드를 쓸 때, 두 여학생은 가끔' 프로그래머의 격려자' 가 되어 팀을 응원한다.
각각 1994 와 1995 에서 태어난 이 두 소녀는 웃으며 말했다
그들은 미래에 대해 많은 생각을 가지고 있다. "핸드톤" 은 대면 채팅과 장시간 대화를 할 수 있는 기능을 제공합니다. 앞으로는 수화 교육, 수화 글자, 스마트 팔 고리 폐쇄 루프를 도입해 수화 교사 부족 등 다양한 문제를 해결할 수 있다. 또한, 이 인공 지능 기술은 성숙 후 다른 측면에 적용 될 수 있습니다, 예를 들어, 더 정확 하 게 피아노를 연주하는 피아노 소년을 가르치는 것입니다.