The main theoretical motivation of the project is to propose a new statistically justified approach to recurrent neural networks. The proposed research is largely based on the original results of our previous academic project on Probabilistic Neural Networks (PNN) closed in 2000 with %22excellent results%22 and on the related papers published in the last five years. The basic idea of the probabilistic approach to recurrent neural networks is to introduce feedback into the standard feed-forward architecture of PNN. We shall consider especially the principle of iterative inference mechanism originally proposed for probabilistic expert systems. The potential benefit of recurrent solutions will be verified by comparing the standard feed-forward architecture with the recurrent PNN in application to pattern recognition and texture evaluation. PNN proved to be a powerful tool to solve practical problems and simultaneously, unlike standard approaches, they are biologically interpretable in many (en)
Hlavní teoretickou motivací projektu je návrh nového statisticky zdůvodněného přístupu k rekurentním neuronovým sítím. Navrhovaný výzkum v širokých mezích vychází z původních výsledků našeho předchozího akademického projektu Pravděpodobnostní neuronové sítě (PNS), který byl ukončen v roce 2000 s %22vynikajícími výsledky%22 a z několika navazujících prací publikovaných v posledních pěti letech. Základní idea navrhovaného pravděpodobnostního přístupu k rekurentním neuronovým sítím předpokládá vytvoření zpětné vazby ve standardní vzestupné architektuře PNS. Jednu z možností nabízí využití iterativního inferenčního mechanismu původně navrženého v pravděpodobnostním expertním systému. Potenciální přínos rekurentní architektury bude ověřován ve srovnání sestandardní vzestupnou PNS při aplikaci v rozpoznávání a při vyhodnocování textur. PNS jsou prakticky použitelné a současně připouštějí biologickou interpretaci až na úrovni funkčních vlastností neuronu. Neuromorfní vlastnosti jsou významnou předností PNS
The main subject of the current project is to introduce a global feedback into the standard feed-forward architecture of PNN. With this aim we have proposed two iterative decision schemes based on recurrent use of Bayes formula. In the paper \%22Iterative principles of recognition in probabilistic neural networks\%22 published in Neural Networks (cf. [1]) we have shown that some (en)
Pravděpodobnostní přístup k rekurentním neuronovým sítím předpokládá vytvoření zpětné vazby ve standardní vzestupné architektuře pravděpodobnostní neuronové sítě. Experimentální realizace rekurentní neuronové sítě modelovým způsobem je snadná, je ale velmi obtížné formulovat spolehlivé teoretické základy umožňující optimalizaci zpětnovazebního učení. Nejdůležitějším výsledkem v teoretické oblasti (cs)