Введение Это вторая часть моей серии блогов о реализации решателя нелинейной оптимизации, которую я возобновил после небольшого перерыва. В моем предыдущем блоге я упомянул о реализации основных строительных блоков решателя нелинейной оптимизации, который включает в себя механизм дифференцирования, механизм линейной алгебры, числа и т. д. В этой статье, в частности, я хотел бы обсудить аспекты реализации дифференцирования двигатель и обсудить несколько методов, используемых для вычисления..

Новое исследование Google Research предложило единый, эффективный и модульный подход для неявной дифференциации задач оптимизации, который сочетает в себе преимущества неявного дифференцирования и автоматического дифференцирования (autodiff). Исследователи говорят, что решатели, оснащенные неявной дифференциацией, установленной предлагаемой структурой, могут сделать процесс автодифференции более эффективным для конечных пользователей. Autodiff - это революционный метод, используемый в..