El Perceptrón multicapa compacto con reducción dimensional por comparación en valores singulares para el reconocimiento de dígitos manuscritos
Palabras clave:
perceptrón multicapa, red neuronal tipo vanilla, descomposición por valores singulares, reducción dimensional, extracción de características, retropropagación, clasificación de imágenesResumen
El reconocimiento de patrones visuales mediante redes neuronales de tipo perceptrón multicapa se emplea en tareas con recursos limitado de cómputo, memoria y tiempo de entrenamiento. En este trabajo se implementa un método que aplica la descomposición por valores singulares (SVD) y se evalúan en un perceptrón multicapa (MLP), para clasificar imágenes de dígitos manuscritos de píxeles. La SVD sirve a dos fines simultáneos; reduce la dimensionalidad al proyectar las imágenes sobre el subespacio singular dominante, y a la vez ofrece a la primera capa una inicialización determinista e interpretable. Un punto por considerar en el diseño experimental es la base singular se estima exclusivamente sobre la partición de entrenamiento y se aplica, sin recalcularse, a la de prueba; lo que evita por construcción la transferencia indebida de información entre particiones. La evaluación es realizada sobre una base de imágenes de entrenamiento y de prueba, balanceadas en diez clases; la SVD comprime la entrada a un intervalo comprendido entre el y el de su dimensión original e incluso superando la exactitud del modelo sin reducción, y disminuyendo de manera monótona la pérdida para la fase de prueba. El modelo alcanza una exactitud del y un puntaje macro de con únicamente parámetros entrenados, frente a los de una arquitectura MLP equivalente sin reducción. La corrección de la retropropagación y la integridad del protocolo experimental se verifican numéricamente.Citas
Abaza, B. F., & Gheorghita, V. (2025). Artificial neural network framework for hybrid control and monitoring in turning operations. Applied Sciences, 15(7), 3499. https://doi.org/10.3390/app15073499 MDPI
Chen, H., Wang, Y., Guo, J., & Tao, D. (2023). VanillaNet: The power of minimalism in deep learning. Advances in Neural Information Processing Systems, 36, 7050–7064. https://doi.org/10.52202/075280-0308 proceedings.com
Du, K.-L., Leung, C.-S., Mow, W. H., & Swamy, M. N. S. (2022). Perceptron: Learning, generalization, model selection, fault tolerance, and role in the deep learning era. Mathematics, 10(24), 4730. https://doi.org/10.3390/math10244730 MDPI
Eckart, C., & Young, G. (1936). The approximation of one matrix by another of lower rank. Psychometrika, 1(3), 211–218. https://doi.org/10.1007/BF02288367 DOI
Galis, F., Onchis, D. M., & Istin, C. (2025). Refining filter global feature weighting for fully unsupervised clustering. Applied Sciences, 15(16), 9072. https://doi.org/10.3390/app15169072 MDPI
Goodfellow, I., Bengio, Y., & Courville, A. (2016). Deep learning. MIT Press. https://www.deeplearningbook.org/
He, K., Zhang, X., Ren, S., & Sun, J. (2015). Delving deep into rectifiers: Surpassing human-level performance on ImageNet classification. In Proceedings of the IEEE International Conference on Computer Vision (ICCV) (pp. 1026–1034). IEEE. https://doi.org/10.1109/ICCV.2015.123 openaccess.thecvf.com
Hinton, G. E., & Salakhutdinov, R. R. (2006). Reducing the dimensionality of data with neural networks. Science, 313(5786), 504–507. https://doi.org/10.1126/science.1127647 PubMed
Hubin, A., & Storvik, G. (2024). Sparse Bayesian neural networks: Bridging model and parameter uncertainty through scalable variational inference. Mathematics, 12(6), 788. https://doi.org/10.3390/math12060788 MDPI
Jolliffe, I. T., & Cadima, J. (2016). Principal component analysis: A review and recent developments. Philosophical Transactions of the Royal Society A: Mathematical, Physical and Engineering Sciences, 374(2065), 20150202. https://doi.org/10.1098/rsta.2015.0202 DOI
Kingma, D. P., & Ba, J. (2015). Adam: A method for stochastic optimization. In 3rd International Conference on Learning Representations (ICLR 2015). https://doi.org/10.48550/arXiv.1412.6980 DOI
LeCun, Y., Bottou, L., Bengio, Y., & Haffner, P. (1998). Gradient-based learning applied to document recognition. Proceedings of the IEEE, 86(11), 2278–2324. https://doi.org/10.1109/5.726791 DOI
Lytvyn, V., Peleshchak, I., Peleshchak, R., Shakleina, I., Mozol, N., & Svyshch, D. (2024). Object image recognition using multilayer perceptron combined with singular value decomposition. In M. Emmerich, V. Lytvyn, & V. Vysotska (Eds.), Proceedings of the Modern Machine Learning Technologies Workshop (MoMLeT 2024) (CEUR Workshop Proceedings, Vol. 3711, pp. 225–234). CEUR-WS.org. https://ceur-ws.org/Vol-3711/paper13.pdf ceur-ws.org
Turk, M., & Pentland, A. (1991). Eigenfaces for recognition. Journal of Cognitive Neuroscience, 3(1), 71–86. https://doi.org/10.1162/jocn.1991.3.1.71
Descargas
Publicado
Cómo citar
Número
Sección
Licencia
Derechos de autor 2026 ReCIBE, Revista electrónica de Computación, Informática, Biomédica y Electrónica

Esta obra está bajo una licencia internacional Creative Commons Atribución-NoComercial-CompartirIgual 4.0.