星火+人工智能2019欧洲峰会上周来到阿姆斯特丹！来自63个国家的2300多名数据科学家、数据工程师和全球商界领袖齐聚阿姆斯特丹RAI会议中心，了解ApacheSpark的最新社区和开源开发™三角洲湖，MLflow，考拉，等等。查看主题演讲录音，了解更多有关此次售罄活动的最新公告和社区更新！开源更新：deltalake加入Linux基金会apachespark™ 3.0计划、MLflow模型注册表等在2019年欧洲Spark峰会上，我们了解到了几个开源ApacheSpark的一些令人兴奋的新进展™ 社区热切期待的项目。首先，我们听取了Databricks首席执行官兼联合创始人alighodsi的发言，他谈到了数据科学家、数据工程师和业务分析师每天都要面对的难题。在题为《统一数据分析：帮助数据团队解决世界上最棘手的问题》的主旨演讲中，阿里明确提出了不容错过的大数据和人工智能未来的广阔愿景。Delta Lake加入Linux基金会Databricks公司首席软件工程师Michael Armbrust在其主题演讲《开源生态系统的新发展》中分享了开源Delta-Lake持续增长的计划，强调了这一有前途的技术的日益迅速的采用。Michael很高兴地报告说，已经有3700多个组织在使用Delta，而且每个月都有超过20亿gb（2exabytes，你看得对）的数据进行处理。最重要的是，在一个出人意料的声明中，Michael告诉阿姆斯特丹的观众，deltalake将加入Linux基金会，以继续推动Delta-Lake的采用和开源社区的发展！高级软件工程师BurakYavuz带着观众参观了Delta Lake的演示，熟练地展示了Delta的能力和能力。阿帕奇火花™ 3.0即将推出的增强功能除了关于Delta湖的令人兴奋的消息外，Michael还分享了即将发布的apachespark的一些新进展™ 3.0，包括Spark SQL优化器的显著性能改进。这些改进，包括分区修剪和在某些合并操作中巧妙地使用广播连接，可以为某些查询提供高达17倍的性能改进。最后，Michael引入了一个新的联邦数据目录Spark。MLflow模型注册表更新为了不甘落后，Databricks Matei Zaharia的首席技术专家和联合创始人讨论了新模型注册表对MLflow生态系统的重要性。他在阿姆斯特丹RAI会议中心向观众发表了题为《利用apachespark的原始创建者MLflow简化模型管理》的主题演讲™ 解释了MLflow模型注册表如何通过提供一个协作存储库来组织和生产不同版本的机器学习模型，其中可以保存命名的ML模型并对其进行版本控制。模型注册表还使数据工程师和数据科学家能够实现灵活的CI/CD管道，Databricks软件工程师coreyzumar很好地向人群演示了这一点。在这里了解有关MLflow模型注册表的更多信息。考拉社区的成长和收养我们还听取了Databricks自己的首席顾问Brooke Wenig关于考拉开源项目持续成功的消息，该项目旨在带来apachespark的力量™ 到pandas，流行的Python数据分析库。开源社区成员每天下载考拉的次数超过10000次，自项目开始以来，该项目的月环比增长率超过100%。我们还观看了一个现场演示，展示了从熊猫的单节点数据科学过渡到使用考拉的Spark的多节点数据科学是多么容易。在这里了解这个激动人心的开源项目的更多信息。主题演讲：凯蒂·鲍曼（Katie Bouman）关于创建第一个黑洞的图像，Gaël Varoquoux关于scikit learn成功的"秘密武器"，等等今年的Spark+AI欧洲峰会的主题演讲来自加州理工学院计算和数学科学助理教授Katie Bouman。在她的主旨演讲《想象看不见的：拍摄黑洞的第一张照片》中，凯蒂向我们介绍了她和她的团队在太空中用"视界"望远镜拍摄天体的过程。我们也很幸运地听到了Gaël Varoquouux的消息，他是scikit learn的创造者，也是Inria的教职研究员。在Gaël的主题演讲《民主化机器学习：从scikit learn创造者的视角》中，他解释了一些简单的原则，其中包括一个他称之为"秘密武器"的原则，这是scikit Learning大获成功的关键。Google DeepMind首席科学家、谷歌大脑团队前成员Oriol Vinyals在他的谈话项目AlphaStar中与我们分享了一个有趣的故事：用人工智能掌握实时战略游戏星际争霸2。客户主题演讲阿姆斯特丹活跃的观众还听取了其他传奇人物和名人的演讲，包括：Alessio Basso，PayMe/HSBC，关于在汇丰银行用统一的云端数据和人工智能平台改造支付伊莱克斯的johanvallin，在使用ML驱动的交互式工具预测零售业的"假设"情景时说Stephen Galsworthy博士，Quby，通过数据和人工智能的统一方法来节约家庭能源Mark Hamilton和Christina Lee，微软，谈微软的AI For Good Initiative统一分析中的女性：阿姆斯特丹Spark+AI的小组讨论和网络今年的Spark峰会还聚集了统一分析和联盟的女性，为大数据、数据科学、机器学习和人工智能领域的女性提供了一个连接、学习和网络的机会。来自微软、劳埃德银行、Wehkamp、Centrum Wiskunde&Informatica、ARM、Depop等公司的女性领导人聚集在一起进行技术会谈和小组讨论。他们涵盖的主题包括技术趋势、多样性和包容性、伦理人工智能和女性职业发展。Spark Summit欧洲社区会议：Spark调优研讨会、技术教程、大数据案例研究等除了主旨演讲外，在今年的Spark+AI欧洲峰会上，与会者还接受了140多场不同的社区会议和讲师指导的培训。这些社区会议的主讲人来自KTH、Socialbakers、Airbnb、Eventbrite、Getyourguide、H&M、CERN、La Poste、Klario、Facebook、法国兴业银行、Canal+、Nielsen等公司。这些技术会议涵盖了各种用例和最佳实践，包括深入学习、结构化流、apachespark等主题的实践教程™ tuning，Delta Lake，MLflow等等。Spark+AI峰会的下一步是什么Spark+AI欧洲峰会2019主题视频现已发布！要查看最新产品发布和思想领导力，请在Twitter上关注@Databricks或订阅我们的时事通讯。您还可以在我们的免费Databricks社区版上学习apachespark、deltalake和MLflow，或者免费试用Databricks来构建生产数据应用程序。一如既往，感谢您的支持，我们期待着在即将于2020年6月23日至25日在旧金山举行的Spark+AI峰会上再次与您见面！相关链接公告：引入MLflow模型注册表声明：DeltaLake现在由Linux基金会托管，成为数据湖的开放标准视频：Spark+AI峰会欧洲主题视频免费试用Databricks。今天就开始吧