| Mon, 01 Mar 2010 11:45:59 -0500 |
fsavard |
Merge
|
| Mon, 01 Mar 2010 11:45:25 -0500 |
fsavard |
Ajout du code de base pour scalar_series. Modifications à stacked_dae: réglé un problème avec les input_divider (empêchait une optimisation), et ajouté utilisation des séries. Si j'avais pas déjà commité, aussi, j'ai enlevé l'histoire de réutilisation du pretraining: c'était compliqué (error prone) et ça créait des jobs beaucoup trop longues.
|
| Fri, 26 Feb 2010 17:45:52 -0500 |
fsavard |
Enlevé ce qui concernait la réutilisation de résultats de préentraînement (trop compliqué pour peu de bénéfice: c'est le finetuning qui est vraiment long
|
| Sat, 27 Feb 2010 19:26:26 -0500 |
boulanni |
Transient exception handling in captchas (ie. lorsque le NFS est temporairement inaccessible)
|
| Sat, 27 Feb 2010 19:21:57 -0500 |
boulanni |
Adapted pipeline to new directory structure
|
| Sat, 27 Feb 2010 18:28:48 -0500 |
boulanni |
J'ai reséparé NIST/OCR purs pour avoir des ensembles de test et de validation de 80000 plutôt que 20000, comme on a discuté au cours
|
| Sat, 27 Feb 2010 17:10:37 -0500 |
Arnaud Bergeron |
Remove a stray cast in the FTDataSet code and export the ocr dataset.
|
| Sat, 27 Feb 2010 16:50:16 -0500 |
Arnaud Bergeron |
Add dtype conversion and rescaling to the read path.
|
| Sat, 27 Feb 2010 16:07:09 -0500 |
Arnaud Bergeron |
Do not yield theano shared variables. They can only be used by theano.function().
|
| Sat, 27 Feb 2010 15:09:02 -0500 |
Arnaud Bergeron |
Make the datasets iterators return theano shared slices with the appropriate types.
|
| Sat, 27 Feb 2010 14:15:11 -0500 |
Arnaud Bergeron |
Use izip(), not zip() to return a lazy iterator. (datasets)
|
| Sat, 27 Feb 2010 14:10:14 -0500 |
Arnaud Bergeron |
Update comments in the dataset definition (you can't pass 0 as minibatch size).
|
| Sat, 27 Feb 2010 13:56:14 -0500 |
Arnaud Bergeron |
Define the ocr dataset and use the existing split for nist.
|
| Sat, 27 Feb 2010 12:18:26 -0500 |
Arnaud Bergeron |
Make data_generation.transformations importable and fixup test.py to not try some of the modules.
|
| Sat, 27 Feb 2010 12:01:08 -0500 |
Arnaud Bergeron |
Take the validation set at the end of the training set files rather than at the beginning.
|
| Fri, 26 Feb 2010 15:25:44 -0500 |
Dumitru Erhan |
ignoring certain files when doing hg status
|
| Fri, 26 Feb 2010 15:25:01 -0500 |
Dumitru Erhan |
making the data_generation folder (and subdirs) an importable module
|
| Fri, 26 Feb 2010 14:28:48 -0500 |
Dumitru Erhan |
moved deepmlp code into baseline/deep_mlp
|
| Fri, 26 Feb 2010 14:24:11 -0500 |
Dumitru Erhan |
directory name change
|
| Fri, 26 Feb 2010 14:23:47 -0500 |
Dumitru Erhan |
Pipeline code shuffle
|
| Fri, 26 Feb 2010 14:15:38 -0500 |
Dumitru Erhan |
More moves - transformations into data_generation, added "deep" folder
|
| Fri, 26 Feb 2010 14:03:24 -0500 |
Dumitru Erhan |
Moving the convolutional MLP code into baseline
|
| Fri, 26 Feb 2010 13:55:27 -0500 |
Dumitru Erhan |
Updating the tutorial code to the latest revisions.
|
| Thu, 25 Feb 2010 18:53:02 -0500 |
Arnaud Bergeron |
Add nist_lower, nist_upper, nist_all
|
| Thu, 25 Feb 2010 18:40:01 -0500 |
Arnaud Bergeron |
Add inital implementation of datasets.
|
| Thu, 25 Feb 2010 18:12:18 -0500 |
Arnaud Bergeron |
Do not commit syntax errors. (in test.py)
|
| Thu, 25 Feb 2010 18:11:25 -0500 |
Arnaud Bergeron |
Make test not test itself.
|
| Thu, 25 Feb 2010 17:27:49 -0500 |
Arnaud Bergeron |
Simple script to doctest all modules beneath ift6266.
|
| Thu, 25 Feb 2010 09:05:48 -0500 |
Myriam Cote |
merge
|
| Thu, 25 Feb 2010 09:04:40 -0500 |
Myriam Cote |
nouveau répertoire régression logistique
|
| Wed, 24 Feb 2010 19:27:38 -0500 |
boulanni |
Ajouté seed 100 à 207 aux ensembles de données générés
|
| Wed, 24 Feb 2010 19:12:01 -0500 |
boulanni |
On peut maintenant launcher le pipeline avec un seed donné, résultats déterministes
|
| Wed, 24 Feb 2010 18:27:09 -0500 |
boulanni |
Enlevé les re-seed constants, interfère avec les autres modules
|
| Wed, 24 Feb 2010 16:59:04 -0500 |
boulanni |
Checked all modules to work with only numpy.random and random and to be deterministic after numpy.random.seed() and random.seed()
|
| Wed, 24 Feb 2010 13:51:18 -0500 |
SylvainPL |
Script utilise pour creer le jeu de donnees utilise pour le module Occlusion.py. De plus, le fichier /data/lisa/data/ift6266h10/echantillon_occlusion.py a change afin d'etre cree avec seed random (jeu reproductible)
|
| Wed, 24 Feb 2010 13:16:14 -0500 |
SylvainPL |
Rajout d'un seed random et d'une fonction get_seed
|
| Wed, 24 Feb 2010 13:15:52 -0500 |
SylvainPL |
Rajout d'un seed random et d'une fonction get_seed
|
| Wed, 24 Feb 2010 13:15:28 -0500 |
SylvainPL |
Rajout d'un seed random et d'une fonction get_seed
|
| Wed, 24 Feb 2010 13:14:55 -0500 |
SylvainPL |
Rajout d'un seed random et d'une fonction get_seed.Aussi, import random enleve car non necessaire
|
| Wed, 24 Feb 2010 13:14:02 -0500 |
SylvainPL |
Rajout d'un seed random et d'une fonction get_seed
|
| Wed, 24 Feb 2010 13:13:33 -0500 |
SylvainPL |
Rajout d'un seed random et d'une fonction get_seed
|
| Wed, 24 Feb 2010 12:44:39 -0500 |
Jeremy Eustache |
Reseau a convolution
|
| Tue, 23 Feb 2010 18:23:47 -0500 |
XavierMuller |
changed adaptive lr flag from bool to int for jobman issues
|
| Tue, 23 Feb 2010 18:16:55 -0500 |
XavierMuller |
merge
|
| Tue, 23 Feb 2010 18:08:11 -0500 |
XavierMuller |
added adaptive lr, weight file save, traine error and error curves
|
| Tue, 23 Feb 2010 14:15:47 -0500 |
boulanni |
Added other auxiliary files corruption tests
|
| Mon, 22 Feb 2010 14:22:07 -0500 |
fsavard |
Changé un True pour False, mais je le commit car c'est ça que j'utilise pour lancer mes jobs.
|
| Mon, 22 Feb 2010 13:39:35 -0500 |
fsavard |
Ajoutés fichiers oubliés pour previous commit.
|
| Mon, 22 Feb 2010 13:38:25 -0500 |
fsavard |
Ajouté des __init__.py dans l'arborescence pour que les scripts puissent être utilisés avec des paths pour jobman, et fait pas mal de modifs dans stacked_dae pour pouvoir réutiliser le travail fait pour des tests où le pretraining est le même.
|
| Sun, 21 Feb 2010 17:30:38 -0600 |
Owner |
Initial commit for the stacked convolutional denoising autoencoders
|
| Sat, 20 Feb 2010 02:12:57 -0500 |
boulanni |
Added script to separate OCR data in train, validation and test sets (raw data)
|
| Sat, 20 Feb 2010 02:11:56 -0500 |
boulanni |
Added script to launch the ~108 data generation jobs with dbidispatch
|
| Sat, 20 Feb 2010 02:10:30 -0500 |
boulanni |
Added script to test truetype font files validity (corruption)
|
| Sat, 20 Feb 2010 02:09:09 -0500 |
boulanni |
Fixed various bugs in pipeline for Python 2.5 support
|
| Sat, 20 Feb 2010 02:07:29 -0500 |
boulanni |
Adapted ttf2jpg to get fonts in /Tmp/allfonts local folder
|
| Sat, 20 Feb 2010 02:06:38 -0500 |
boulanni |
Adapted pycaptcha to get fonts in /Tmp/allfonts local folder
|
| Fri, 19 Feb 2010 08:43:10 -0500 |
savardf |
Un peu de ménage dans code pour stacked DAE, splitté en fichiers dans un nouveau sous-répertoire.
|
| Thu, 18 Feb 2010 14:44:23 -0500 |
Xavier Glorot |
merge
|
| Thu, 18 Feb 2010 14:43:53 -0500 |
Xavier Glorot |
Changes to fit with visualisation
|
| Thu, 18 Feb 2010 14:27:49 -0500 |
boulanni |
Added captcha support in pipeline.py
|
| Thu, 18 Feb 2010 14:16:54 -0500 |
boulanni |
Added digits and uppercase letters to list of possible characters in captchas
|
| Thu, 18 Feb 2010 14:15:47 -0500 |
boulanni |
Fixed bug in pycaptcha/Facade.py
|
| Thu, 18 Feb 2010 12:58:34 -0500 |
Xavier Glorot |
little changes in Rature and occlusion to fit with visualisation
|
| Thu, 18 Feb 2010 12:33:17 -0500 |
Xavier Glorot |
reduced affine transform coefficient
|
| Thu, 18 Feb 2010 11:10:53 -0500 |
SylvainPL |
Maintenant, plus grande probablite d'effectuer une occlusion. Proba= 0.3 maintenant
|
| Thu, 18 Feb 2010 10:55:29 -0500 |
SylvainPL |
Correction d'un petit bug (random.randint a des bornes inclusives, ce qui pouvait creer un petit bug)
|
| Thu, 18 Feb 2010 10:53:36 -0500 |
SylvainPL |
Maintenant, les ratures sont fabriquees a partir de 1 qui ont ete transformes pas mal. Les ratures peuvent maintenant etre plus d'une. Proba 0.15 d'effectuer une rature
|
| Wed, 17 Feb 2010 17:45:48 -0500 |
Xavier Glorot |
changed some transformation paramters to better fit with visualization
|
| Wed, 17 Feb 2010 17:06:54 -0500 |
fsavard |
Refait stacked_dae.py en utilisant le dataset complet shared (juste reparti à 0 à partir du code du tutoriel), et préparé pour utiliser NIST (pas testé)
|
| Wed, 17 Feb 2010 16:25:44 -0500 |
Xavier Glorot |
small change to testtransformation to match with the pipeline behavior
|
| Wed, 17 Feb 2010 16:23:54 -0500 |
Xavier Glorot |
changed again the variance scaling for Distorsion Gauss, come back to the original
|
| Wed, 17 Feb 2010 16:22:54 -0500 |
Xavier Glorot |
changes on pipeline mecanism: we now sample a different complexity for each transformations, this because when we use the same sampled complexity for all the modules 1/8 of the time we are close to 0 and we obtain an image very close to the source, we now save a complexity for each module in the parameters array
|
| Wed, 17 Feb 2010 16:20:15 -0500 |
Xavier Glorot |
changes on pipeline mecanism: we now sample a different complexity for each transformations, this because when we use the same sampled complexity for all the modules 1/8 of the time we are close to 0 and we obtain an image very close to the source, we now save a complexity for each module in the parameters array
|
| Wed, 17 Feb 2010 09:29:19 -0500 |
fsavard |
Added stacked DAE code for my experiments, based on tutorial code. Quite unfinished.
|
| Tue, 16 Feb 2010 18:56:22 -0500 |
Xavier Glorot |
testtransformation.py to source from all the available data
|
| Tue, 16 Feb 2010 18:55:51 -0500 |
Xavier Glorot |
Changed the variance factor of the distorsion gauss from /10 to /15 (to have a bit less noise)
|
| Tue, 16 Feb 2010 17:24:21 -0500 |
Xavier Glorot |
Changed a bit the code for BruitGauss.py for simplicity
|
| Tue, 16 Feb 2010 17:12:35 -0500 |
XavierMuller |
added simple mlp file
|
| Tue, 16 Feb 2010 13:10:06 -0500 |
boulanni |
Adapté le générateur d'images de fontes pour utiliser en amont du pipeline
|
| Mon, 15 Feb 2010 16:17:48 -0500 |
boulanni |
pipeline.py: placé les modules dans le bon ordre + store NIST en bytes plutôt qu'en float32 dans la RAM
|
| Mon, 15 Feb 2010 15:35:17 -0500 |
boulanni |
Ajouté un script pour visualiser les ensembles de données générés enregistrés dans le format filetensor (nist_read2.py)
|
| Mon, 15 Feb 2010 15:22:08 -0500 |
boulanni |
Correction bug division par zéro dans BruitGauss.py
|
| Fri, 12 Feb 2010 10:30:02 -0500 |
SylvainPL |
Parametre deterministe retourne dans les fonctions '_determined_by_complexity' et le parametre stochastique retourne dans les fonctions conventionnelles
|
| Fri, 12 Feb 2010 10:21:21 -0500 |
SylvainPL |
corrige nom de la methode get_settings_names_determined_by_complexity(self,complexity)
|
| Fri, 12 Feb 2010 10:21:02 -0500 |
SylvainPL |
corrige nom de la methode get_settings_names_determined_by_complexity(self,complexity)
|
| Fri, 12 Feb 2010 10:15:22 -0500 |
SylvainPL |
Parametre stochastique retourne par fonctions habituelles et le parametre deterministe retourne par fonctions 'determined_by_complexity'
|
| Fri, 12 Feb 2010 10:13:50 -0500 |
SylvainPL |
Valeur d'entree des methodes 'determines_by_complexity' harmonisees avec local_elastic_distortion.py
|
| Fri, 12 Feb 2010 09:53:40 -0500 |
SylvainPL |
Separation des parametres deterministes et stochastiques dans les methodes retournant noms et valeurs
|
| Thu, 11 Feb 2010 17:26:44 -0500 |
Xavier Glorot |
deleted useless print in BruitGauss.py
|
| Thu, 11 Feb 2010 16:36:30 -0500 |
Xavier Glorot |
merge
|
| Thu, 11 Feb 2010 16:36:12 -0500 |
Xavier Glorot |
Changed order of transformation
|
| Thu, 11 Feb 2010 16:34:25 -0500 |
Xavier Glorot |
Changed behavior of gaussian noise to apply a gauss filter with a random sigma, and then select some point of the image to be averaged with it
|
| Thu, 11 Feb 2010 12:18:34 -0500 |
SylvainPL |
Rajout du calcul de la proportion de lettres (min+maj)
|
| Thu, 11 Feb 2010 11:55:03 -0500 |
Xavier Glorot |
cleaning some *.pyc and *.py~ files in pycapcha
|
| Thu, 11 Feb 2010 11:23:35 -0500 |
SylvainPL |
Ajout d'un graphique (histogramme) comparatif pour l'occurence de chaque caractere
|
| Thu, 11 Feb 2010 10:43:22 -0500 |
SylvainPL |
Petit script primitif utilise pour calculer la proportion des trois classes dans Nist train et test.
|
| Thu, 11 Feb 2010 09:15:42 -0500 |
SylvainPL |
Il y a maintenant une proba 0.2 d'effectuer des permutations. Cette nouvelle fonctionnalite demande un parametre non deterministe, ce qui fait que maintenant, les fonctions 'determined_by_complexity' ont ete abandonees. Le module se comporte comme un module normal
|
| Thu, 11 Feb 2010 09:08:16 -0500 |
SylvainPL |
Il y a maintenant une proba de 0.3 d'effectuer le bruitage. De plus, comme cette nouvelle fonctionnalite demande un parametre non-deterministe, les deux fonctions 'determined_by_complexity' ont ete enlevees. Le module se comporte comme un module conventionnel
|
| Thu, 11 Feb 2010 09:01:03 -0500 |
SylvainPL |
Il y a maintenant 25% de proba d'effectuer le bruitage
|
| Thu, 11 Feb 2010 08:55:41 -0500 |
SylvainPL |
Maintenant, il y a 25% de proba d'effectuer le bruitage. De plus, comme cette option demande un nouveau parametre, maintenant le module retourne ses parametres normalement. Plus desoin des 2 fonctions /determined_by_complexity/
|
| Thu, 11 Feb 2010 05:09:46 -0500 |
goldfinger |
code pour la generation de captchas
|
| Wed, 10 Feb 2010 17:50:58 -0500 |
fsavard |
Modifs pour interface parameters determined by complexity
|
| Wed, 10 Feb 2010 17:47:57 -0500 |
Xavier Glorot |
changed contrast definition for add_background_image
|
| Wed, 10 Feb 2010 17:38:17 -0500 |
Xavier Glorot |
testtransformation now work with all the transformations and save image files (.PNG) to a hard coded path
|
| Wed, 10 Feb 2010 17:37:00 -0500 |
Xavier Glorot |
Changed behavior of add_background in order to have a contrast generation parameter and doing the max without using a treshold mask
|
| Wed, 10 Feb 2010 15:09:24 -0500 |
Xavier Glorot |
merge
|
| Wed, 10 Feb 2010 15:09:02 -0500 |
Xavier Glorot |
add all transformation to pipeline
|
| Wed, 10 Feb 2010 15:03:40 -0500 |
Xavier Glorot |
small display change in testtransformation
|
| Wed, 10 Feb 2010 14:52:13 -0500 |
Xavier Glorot |
added a local data load if available (on maggie it will) for background images
|
| Wed, 10 Feb 2010 14:51:18 -0500 |
SylvainPL |
Mise a niveau specifications parametres deterministes, bruitage moins aggressif et transformations toutes pareilles tant qu'on ne rappelle pas regenerate_parameters()
|
| Wed, 10 Feb 2010 14:42:40 -0500 |
SylvainPL |
Mise a niveau specifications parametres deterministes et nouvelle normalisation des images
|
| Wed, 10 Feb 2010 14:24:35 -0500 |
SylvainPL |
Mise a niveau specifications parametres deterministes et invariance des bites changees entre les appels de regenerate_parameters()
|
| Wed, 10 Feb 2010 14:12:34 -0500 |
SylvainPL |
Diminution de la proba de faire une rature, c'est 15% maintenant
|
| Wed, 10 Feb 2010 14:03:50 -0500 |
SylvainPL |
Contraste entre image et bruit renforce et proba 0.2 d'effectuer l'occlusion
|
| Wed, 10 Feb 2010 13:02:05 -0500 |
Xavier Glorot |
fixed float32 return on affine_transform
|
| Wed, 10 Feb 2010 11:34:32 -0500 |
Arnaud Bergeron |
forgot to import sys in testmod
|
| Wed, 10 Feb 2010 11:23:30 -0500 |
Arnaud Bergeron |
Fix testmod to accept modules with no params.
|
| Wed, 10 Feb 2010 00:38:54 -0500 |
Xavier Glorot |
bug fix in reading pkl image list file
|
| Tue, 09 Feb 2010 22:17:37 -0500 |
Xavier Glorot |
Forgot a close in add_background_image
|
| Tue, 09 Feb 2010 22:16:22 -0500 |
Xavier Glorot |
Change in add_background_image to load a pickled list of file, not to do a listdir
|
