Protokó¿ nawigacyjny 3D i wykrywanie obiektów NN dla osób z dysfunkcj¿ wzroku

Badania te koncentrowäy si¿ g¿ównie na stworzeniu interfejsu pomi¿dzy wizjami obiektu wokó¿ otoczenia dla osoby niepe¿nosprawnej wzrokowo. Stworzony interfejs z prawdziwymi mo¿liwo¿ciami wizjonerskimi wykorzystywä przep¿yw pracy w zakresie wykrywania obiektów. Dodano równie¿ garbowany protokó¿ obiektowy dla tego interfejsu. Wykorzystuj¿c dwa wspó¿pracuj¿ce ze sob¿ przep¿ywy pracy, interfejs ten stworzy¿ rozwi¿zanie problemów zwi¿zanych z zaburzeniami widzenia w czasie rzeczywistym. Käda cz¿¿¿ interfejsu przeksztäci¿a przyjazne dla u¿ytkownika wyj¿cie zwrotne. Käda sekcja detekcji obiektów zidentyfikowanych u¿ywäa modelu wasfaster_rcnn_inception_v2_cocc _2018_01_28 i ju¿ przeszkoli¿a model przez Microsoft. Dla zdefiniowanego obiektu poza ¿rodowiskiem wykorzystano tekst do konwersji mowy programu na model kokosowy przet¿umaczony dla protoko¿u d¿wi¿ku mono 3D i wygenerowä on zmienn¿ cz¿stotliwo¿ciow¿ wyboru d¿wi¿ku 3D dla u¿ytkownika do zani¿enia obiektu wokó¿ obiektów. Aby wygenerowä zani¿one fale d¿wi¿kowe 3D mono przekonwertowane na format cyfrowy do analogowego, u¿yto techniki Pulse z modulacj¿. Kädy sygnä zostä zweryfikowany przez protokó¿ cyfrowego generatora zmiennych dla okre¿lenia, który z bocznych obiektów zostä wykryty w systemie.