C3PO - po mojemu

[magicmarcus]

Cześć,
budowę następnego robota czas zacząć 

Kolejny raz podjąłem współpracę z firmą Plast - Spaw. Firma udostępniła mi materiał do druku, bo jak w przypadku moich poprzednich robotów, tak i ten będzie częściowo wydrukowany na drukarce 3d. Spora część robota będzie też wycięta na ploterze cnc, a że w życiu szczęście trzeba mieć, udało mi się dogadać z firmą EBMiA i dostałem od nich części elektroniczne i silniki do budowy plotera cnc - opis budowy plotera można podejrzeć tutaj. 

Części do robota drukowane są na drukarce własnej roboty - może nie do końca, ponieważ trochę rozwiązań podpatrzyłem z drukarki RatRig. Jako, że i tak zawsze obrabiam wydrukowany materiał drukowałem z dyszą 1mm. Jakość wydruku nie powala ale po szlifowaniu i szpachlowaniu będzie gładko.

Jak to teraz wygląda:

1. Projekt:

2. Wydruki:

Takie rzeczy też się zdarzają (za szybko i za wysoka warstwa):

3. I filmik:

Co do funkcji:

• będzie się ruszał od pasa w górę,
• będzie można z nim porozmawiać,
• wykorzystam rozwiązania z poprzedniego robota i na pewno je udoskonalę, tj. rozpoznawanie obiektów, kształtów, twarzy, mimiki, itd...

Teraz czas na etap wycinania ze sklejki...

[Treker (Damian Szymański)]

Zapowiada się bardzo ciekawa, duża konstrukcja  Jakie będą docelowe wymiary?

[magicmarcus]

Dzięki. 

Wymiary 1 do 1 takie jak w filmie czyli mniej więcej wielkości człowieka.

[Treker (Damian Szymański)]

Wow, no to szykuje się ogromna konstrukcja Robisz to typowo hobbystycznie, czy ten robocik będzie miał jakieś komercyjne przeznaczenie?

[magicmarcus]

Od dawna obmyślam plan jak na tych moich robotach zarobić i co nieco się dzieje ale póki co głównie hobbystycznie.

[Gość]

Wygląda trochę makabrycznie.

[magicmarcus]

[magicmarcus]

;-)

W głowie moduł OAK-D - wygrałem w konkursie OpenCV i Intela :-)

[Treker (Damian Szymański)]

@magicmarcus robi wrażenie  Do czego wykorzystujesz te kamery?

[magicmarcus]

Tak z grubsza - przygotowuję projekt do drugiego etapu konkursu: rozpoznawanie twarzy, emocji, płci i wieku oraz wykrywanie dystansu społecznego i wykrywanie czy ktoś ma maseczkę. Do tego robot jest sterowany głosem, można z nim porozmawiać.

[Treker (Damian Szymański)]

@magicmarcus super, koniecznie pochwal się później kolejną aktualizacją

[wn2001]

Dnia 29.10.2020 o 18:57, magicmarcus napisał:

Do tego robot jest sterowany głosem, można z nim porozmawiać.

Niesamowity projekt, gratuluję @magicmarcus, z ciekawości - jak realizujesz rozpoznawanie mowy? A twarz, płeć, wiek i inne sprawy związane z wizją, rozumiem, że tu wszedłeś już w deep-learning?

[magicmarcus]

Dzięki. Rozpoznawanie mowy zrealizowane jest za pomocą biblioteki pocketsphinx, a płeć i inne to deep-learning - część OpenCV, reszta Tensorflow\Kreas i YOLO. Docelowo wszystkie te funkcje będą się wykonywać w module OAK-D z biblioteką deptai - do hosta np. Raspberry Pi będą lecieć tylko wyniki. Poczytajcie sobie - OAK-D .

Przygotowałem też małe demo na konkurs - nie jest to finalna wersja ale coś tam widać

Demo

Edytowano Listopad 2, 2020 przez magicmarcus

[ethanak]

15 minut temu, magicmarcus napisał:

Rozpoznawanie mowy zrealizowane jest za pomocą biblioteki pocketsphinx

Masz polski model???

[magicmarcus]

Korzystam z angielskiego modelu - konkurs jest w USA.

Do rozpoznawania mowy polskiej docelowo użyty będzie moduł pośredniczący (Raspberry Pi z Windows 10 IOT) z biblioteką Microsoft.Speech.Recognition.

To mi już działa i powiem, że nawet bardzo dobrze rozpoznaje mowę.