Archives par auteur backprop

Régularisation L2

La régularisation est la pénalité pour la complexité d’un modèle. Elle aide à éviter le surapprentissage. Le sur-apprentissage nécessite une régularisation. Mettre certains coefficients à 0, c’est la régularisation L0 (peut utilisée). Les différents types de régularisation sont notamment : L1 L2 abandon La pénalisation L1 pénalise la somme des abs des pondérations. La régularisation […]

Ensemble d'apprentissage, de validation et d'évaluation

Afin d’éviter le sur-apprentissage tout en convergeant vers le meilleur modèle possible, il est préférable d’utiliser non pas deux jeux de données seulement (apprentissage et évaluation) mais trois (apprentissage, validation et évaluation). L’ensemble de validation sert à évaluer les résultats de l’ensemble d’apprentissage et l’ensemble d’évaluation sert à vérifier l’évaluation après que le modèle a […]

Le perceptron

The most simple neural network is the “perceptron”, which, in its simplest form, consists of a single neuron. Much like biological neurons, which have dendrites and axons, the single artificial neuron is a simple tree structure which has input nodes and a single output node, which is connected to each input node. Here’s a visual […]

jupyter

Les MOOC DL présentent souvent leurs exercices sur Jupyter. The Jupyter Notebook is an open-source web application that allows you to create and share documents that contain live code, equations, visualizations and narrative text. Uses include: data cleaning and transformation, numerical simulation, statistical modeling, data visualization, machine learning, and much more. Pour une présentation de […]

deep learning network tools

Which deep learning network is best for you? Open source deep learning neural networks are coming of age. There are several frameworks that are providing advanced machine learning and artificial intelligence (A.I.) capabilities over proprietary solutions. How do you determine which open source framework is best for you? Lire une comparaison ici : https://datahub.packtpub.com/deep-learning/top-10-deep-learning-frameworks/