-
Keras中变压器的实现:keras-transformer
资源介绍
变压器
该项目实施“注意就是您所需要的”论文。
我们提供了详细的指南,以了解变压器的概念和所需的Keras功能/技巧(请参阅Guide.md和Walkthrough.md)。
我们希望该软件和文档将使社区能够以更健壮和更快的方式创建和自动化自定义Keras图层/模型/解决方案。
我们还分享了可以通过DSL设置的机器翻译演示。
我们将不胜感激:)
如果可以训练任何大型模型并共享结果,那就太好了。 由于计算资源有限,目前无法测试。
尽管我们在开发过程中进行了正式和非正式的测试; 我们将不胜感激。 还有任何建议和要求。
如果您还有其他Keras技巧或替代方法,也请为文档做出贡献。
关键贡献
可以通过DSL定义模型训练和解码。 因此执行是自动化的。
从定制培训师那里抽象培训基础知识(检查点,工件管理等)。
为生成模型的生成器(所谓的inner-generator )保留明确的接口