GSoC coming to the end

Підходить до завершення літо, а з ним і програма GSoC 2012, у якій мені довелося брати участь. Хотілося б більш детально написати про цей, безумовно цікавий період мого життя, що я й зроблю надалі:).

Як усе починалося

Я вже доволі давно читав про програму GSoC, і в мене було бажання прийняти  у ній участь. Тож, дізнавшись про початок цьогорічної програми, й визначившись, з технологіями, з якими я хотів би працювати (C++/Qt),  я почав ознайомлюватися з FOSS проектами, які використовують ці технології.

Вибір Саймона

Тож, ознайомившись зі списком прийнятих організацій я почав детальніше вивчати ідеї запропоновані організаціями, які декларували використання потрібних технологій. Звичайно ж я, як активний багаторічний користувач KDE, однією з перших відвідав їхню сторінку ідей. Там я знайшов доволі багато цікавих пропозицій. У тому числі й пропозицію про додавання підтримки CMU Sphinx, як backend-a для побудови моделей та розпізнавання у Simon, над якою мені й довелось працювати:). Ознайомившись з доволі великим списком проектів, я все-таки вирішив повернутися до проекту "Simon SPHINX Support". Це рішення спиралося, певно, на те, що Simon зацікавив мене як проект в цілому, і мені було цікаво прийняти участь у його розвитку.

GSoC Midterm report

Ukrainian:

Отже пройдена половина шляху в GSoC проекті "Simon SPHINX support":
як кажуть, час підвести деякі підсумки :). Хоч на початку і були деякі проблеми, пов'язані з браком часу, але зараз розробка йде повним ходом :), і багато чого вже зроблено. Давайте ж подивимося що саме зроблено:

•  Simon зберігає дані для створення акустичних і мовних моделей у своєму власному форматі. Отже для того щоб HTK або SPHINX могли створювати власні моделі на підставі цих даних, ці дані необхідно привести до зрозумілого їм виду. Отже був створений адаптер, який приводить дані для зрозумілого для SPHINX вигляду;
•  Наступним кроком було, власне, створення модуля, який за допомогою спеціального ПЗ (sphinxtrain), створює акустичну модель SPHINX;
• Також архітектура Simon передбачає створення моделі "у фоні". Отже було створено модуль, який працює у окремому потоці і, за допомогою вище названих модулів, створює акустичну та мовну модель з даних Simon;
• Додана можливість вести розпізнавання, зо допомогою SPHINX, базуючись на створених користувачем моделях;
• Було додано можливість вибору між двома backend-ами для створення моделей та розпізнавання;
• Був проведений рефакторинг деяких існуючих модулів Simon (більшою частиною - пов’язаних із новими модулями).
• Що планується робити надалі:
• додати підтримку SPHINX у Sam;
• додати можливість тестування SPHINX моделей;

Які складнощі виникли під час розробки проекту? Ну по перше це критична недостача часу на ранньому етапі. З приводу саме розробки, мабуть - початкове ознайомлення з внутрішнім устроєм Simon.
Але мій ментор оперативно відповідав на усі питання, що зникали, під час цього процесу. Дякую Peter!

English:

So passed half way in the GSoC project, "Simon SPHINX support":
as they say, time to bring some results :). Although at the beginning had some problems with lack of time, but now the development is in full swing :), and much has been done right now. Let us see what is done:

• Simon saves the data to create acoustic and language models in their own format. So in order to HTK and SPHINX can create their own models based on these data, these data should be converted to the right format. Thus was created an adapter that brings data to clear for SPHINX appearance;
• The next step was, a module that is using a special software (sphinxtrain), creates an SPHINX acoustic model (at this stage, the quality of models is poor. now i'm working to determine the causes of this.);
• Simon architecture also provides background model training. Thus was created a module that runs in a separate thread and by using the above mentioned modules, provides acoustic and language model from Simon data;
• Ability to recognize, using SPHINX back-end, based on models created by the user;
• Added a choice between two backends for model creation and recognition (in the testing process by now);
• Carried out refactoring of some existing modules Simon (the most part - associated with new modules).
• What i'm planing to do next:
• Add SPHINX support to Sam;
• Add the ability to test SPHINX models;

What difficulties arose during the project development? Well firstly this is a critical shortage of time at an early stage of project. Regarding the actually development, perhaps - initial familiarization with the internal Simon architecture.But my mentor promptly answered all the questions that disappeared during this process. Thank you Peter!

Hello world

Наслухався різних порад і вирішив вести блог:D. А взагалі у Google+ іноді публікую помітки про технологіям та іншому. Але там вони утопають серед тон контенту. Думаю тут - найкраще місце для їх зберігання. (хоча б тому що, їх тут буде легше знайти:D).
Коли мені буде не ліньки перенесу частину того що писав у G+ сюди.