雅虎公司（Yahoo Inc.）今天宣布，将开放TensorFlowOnSpark的代码源代码，这是一个将TensorFlow程序的人工智能脑力与ApacheSpark和Hadoop框架的海量数据相结合的软件框架。深度学习负责创建最强大的人工智能程序，从谷歌的AlphaGo到Facebook的Lumos。但是它需要大量的数据来训练新的算法。许多公司使用Spark处理大量数据集，允许深度学习框架访问这些数据将极大地推动人工智能的发展。在一篇博客文章中，雅虎解释了其程序员在努力做到这一点时所面临的挑战。"现有的（深度学习）框架常常要求我们为深度学习建立单独的集群，迫使我们为机器学习管道创建多个程序，"雅虎大ML团队解释道拥有独立的群集需要我们在它们之间传输大型数据集，这会带来不必要的系统复杂性和端到端的学习延迟。"为了解决这个问题，雅虎创建了CaffeOnSpark，它允许使用Caffe机器学习框架制作的程序与apachespark一起工作。雅虎已经使用CaffeOnSpark开发的程序来识别搜索中不合适的图片，并自动从流媒体视频中检测电子竞技游戏的亮点。雅虎去年开源了CaffeOnSpark，现在它已经决定对TensorFlowOnSpark做同样的事情，它使用与CaffeOnSpark相同的原理构建，但以Google流行的开源TensorFlow机器学习库为基础。这允许TensorFlow程序访问apachespark上的所有数据公司进程。据雅虎称，将TensorFlow程序转移到TensorFlowOnSpark是一个相对轻松的过程，而且雅虎已经在内部使用了一段时间。"通常情况下，只需要修改不到10行Python代码，"Yahoo说TensorFlow的许多开发人员都很容易使用TensorFlow来执行TensorFlow。"雅虎表示，将继续致力于开发TensorFlowOnSpark和CaffeOnSpark，但它欢迎开源社区就如何改进每个框架提出意见。你可以在雅虎的完整博客文章中阅读关于TensorFlowOnSpark如何工作的更深入的解释。图片：国家档案馆（英国）（国家档案馆（英国））[抄送3.0]，通过维基媒体共享既然你来了…点击订阅我们的YouTube频道（见下文），显示您对我们使命的支持。我们的订户越多，YouTube就越会向你推荐相关的企业和新兴技术内容。谢谢！支持我们的使命：>>>>>立即订阅我们的YouTube频道。……我们还想告诉你我们的使命，以及你如何帮助我们完成它。SiliconANGLE Media Inc.的商业模式是基于内容的内在价值，而不是广告。与许多在线出版物不同的是，我们没有付费墙或横幅广告，因为我们想让我们的新闻保持开放，不受影响，也不需要追逐交通。那个新闻、报道和评论SiliconANGLE——以及现场报道，我们的硅谷工作室和cube环球巡演的视频团队提供的未经剪辑的视频需要大量的辛勤工作、时间和金钱。保持高质量需要赞助商的支持，他们与我们的无广告新闻内容的愿景一致。如果你喜欢这里的报道，视频采访和其他无广告内容，请花点时间看看我们的赞助商支持的视频内容样本，在推特上表达你的支持，然后继续回到SiliconANGLE。