阿里开源 DL 框架;4000台服务器真实数据集;明年1月开源Blink

2023-11-21 15:59

本文主要是介绍阿里开源 DL 框架;4000台服务器真实数据集;明年1月开源Blink,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!


阿里开源 DL 框架;4000台服务器真实数据集;明年1月开源Blink

每周一早晨,阿里妹为你呈现最新的阿里技术资讯。这份“技术早餐”里,包含重磅的阿里技术新闻。五分钟时间,让你成为“周博通”。

还有,圣诞节即将到来,阿里妹在此提前祝所有小伙伴节日快乐。

话不多说,这就为你送上新鲜出炉的“技术早餐”。

阿里开源首个深度学习框架 X-Deep Learning

阿里开源 DL 框架;4000台服务器真实数据集;明年1月开源Blink

以深度学习为核心的人工智能技术,过去的几年在语音识别、计算机视觉、自然语言处理等领域获得了巨大的成功,其中以GPU为代表的硬件计算力,以及优秀的开源深度学习框架起到了巨大的推动作用。

尽管以TensorFlow、PyTorch、MxNet等为代表的开源框架已经取得了巨大的成功,但是当我们把深度学习技术应用在广告、推荐、搜索等大规模工业级场景时,发现这些框架并不能很好的满足我们的需求。

X-DeepLearning正是面向这样的场景设计与优化的工业级深度学习框架,经过阿里巴巴广告业务的锤炼,XDL在训练规模和性能、水平扩展能力上都表现出色,同时内置了大量的面向广告/推荐/搜索领域的工业级算法解决方案。

X-DeepLearning(包括核心训练引擎及算法解决方案)的代码已经在Github开源,地址如下:

https://github.com/alibaba/x-deeplearning

阿里开源4000台服务器真实数据集

阿里开源 DL 框架;4000台服务器真实数据集;明年1月开源Blink

2015 年,阿里巴巴的数据中心,将延迟不敏感的批量离线计算任务和延迟敏感的在线服务部署到同一批机器上运行,让在线服务用不完的资源充分被离线使用以提高机器的整体利用率。

经过 3 年多的试验论证、架构调整和资源隔离优化,目前这个方案已经走向大规模生产。我们通过混部技术将集群平均资源利用率从 10% 大幅度提高到 45%。另外,通过各种优化手段,可以让更多任务运行在数据中心,将“双11”平均每万笔交易成本下降了 17%。

为了让有兴趣的学生以及相关研究人员,可以从数据上更加深入地理解大规模数据中心,我们特别发布了这份数据集(Alibaba Cluster Data V2018)。数据集中记录了某个生产集群中服务器以及运行任务的详细情况。我们希望这波数据的发布可以拉近我们与学术研究、业界同行之间的距离,促进行业的进一步发展。

下载地址:

https://github.com/alibaba/clusterdata/blob/v2018/cluster-trace-v2018/trace_2018.md

阿里巴巴内部 Blink 将于明年1月开源

阿里开源 DL 框架;4000台服务器真实数据集;明年1月开源Blink

今年,实时流计算技术开始步入主流,实时流计算引擎和 API 诸如 Spark Streaming、Kafka Streaming、Beam 和 Flink 持续火爆。阿里巴巴自 2015 年开始改进 Flink,并创建了内部分支 Blink,目前服务于阿里集团内部搜索、推荐、广告和蚂蚁等大量核心实时业务。

12 月 20 日, Flink Forward China 峰会在北京国家会议中心召开。在大会的主题演讲上,阿里巴巴集团副总裁周靖人宣布,阿里巴巴内部 Flink 版本 Blink 将于 2019 年 1 月正式开源!我们希望通过 Blink 开源进一步加深与 Flink 社区的联动,并推动国内更多中小型企业使用 Flink。

持续关注阿里技术公众号,我们将第一时间带来 Blink 开源的详细信息。

精心筹备30个月,阿里首家未来酒店FlyZoo Hotel正式开业

阿里开源 DL 框架;4000台服务器真实数据集;明年1月开源Blink

全场景人脸识别住宿、智能梯控、机器人调酒、机器人送拖鞋……近日,阿里巴巴在杭州开的首家未来酒店FlyZoo Hotel(中文名字“菲住布渴”)终于迎来开业。

“菲住布渴”酒店依托阿里强大的技术与生态支持,实现了全场景身份识别响应和大面积的AI智能服务。住客从大堂到电梯再到房间,乃至餐厅、健身房等场地,都涵盖人脸识别、语音控制、智能机器人等黑科技服务。酒店无前台,大堂有服务大使,可以随时响应住客的需要。

如果住客需要多些护肤品、缺双拖鞋、叫个餐什么的,也不用再麻烦拨打前台电话,通过天猫精灵就行。收到指令后,后台的工作人员会把东西准备好,再让机器人为您送货上门。除此之外,在餐厅,给客人上菜的也是机器人服务员;去大堂演艺吧,机器人调酒师,还会给住客制作多种不同的酒类和咖啡。

这些沉淀下的能力将很快有机会赋能到相关行业。而坐落在亲橙里的这座未来酒店,也将同身边的智慧门店、新餐饮等一道,共同在这个新零售体验中心,为人们带来关于未来的更多想象。

这篇关于阿里开源 DL 框架;4000台服务器真实数据集;明年1月开源Blink的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/403394

相关文章

Python极速搭建局域网文件共享服务器完整指南

《Python极速搭建局域网文件共享服务器完整指南》在办公室或家庭局域网中快速共享文件时,许多人会选择第三方工具或云存储服务,但这些方案往往存在隐私泄露风险或需要复杂配置,下面我们就来看看如何使用Py... 目录一、android基础版:HTTP文件共享的魔法命令1. 一行代码启动HTTP服务器2. 关键参

Python Web框架Flask、Streamlit、FastAPI示例详解

《PythonWeb框架Flask、Streamlit、FastAPI示例详解》本文对比分析了Flask、Streamlit和FastAPI三大PythonWeb框架:Flask轻量灵活适合传统应用... 目录概述Flask详解Flask简介安装和基础配置核心概念路由和视图模板系统数据库集成实际示例Stre

C#监听txt文档获取新数据方式

《C#监听txt文档获取新数据方式》文章介绍通过监听txt文件获取最新数据,并实现开机自启动、禁用窗口关闭按钮、阻止Ctrl+C中断及防止程序退出等功能,代码整合于主函数中,供参考学习... 目录前言一、监听txt文档增加数据二、其他功能1. 设置开机自启动2. 禁止控制台窗口关闭按钮3. 阻止Ctrl +

java如何实现高并发场景下三级缓存的数据一致性

《java如何实现高并发场景下三级缓存的数据一致性》这篇文章主要为大家详细介绍了java如何实现高并发场景下三级缓存的数据一致性,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 下面代码是一个使用Java和Redisson实现的三级缓存服务,主要功能包括:1.缓存结构:本地缓存:使

在MySQL中实现冷热数据分离的方法及使用场景底层原理解析

《在MySQL中实现冷热数据分离的方法及使用场景底层原理解析》MySQL冷热数据分离通过分表/分区策略、数据归档和索引优化,将频繁访问的热数据与冷数据分开存储,提升查询效率并降低存储成本,适用于高并发... 目录实现冷热数据分离1. 分表策略2. 使用分区表3. 数据归档与迁移在mysql中实现冷热数据分

C#解析JSON数据全攻略指南

《C#解析JSON数据全攻略指南》这篇文章主要为大家详细介绍了使用C#解析JSON数据全攻略指南,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录一、为什么jsON是C#开发必修课?二、四步搞定网络JSON数据1. 获取数据 - HttpClient最佳实践2. 动态解析 - 快速

Olingo分析和实践之OData框架核心组件初始化(关键步骤)

《Olingo分析和实践之OData框架核心组件初始化(关键步骤)》ODataSpringBootService通过初始化OData实例和服务元数据,构建框架核心能力与数据模型结构,实现序列化、URI... 目录概述第一步:OData实例创建1.1 OData.newInstance() 详细分析1.1.1

SpringBoot改造MCP服务器的详细说明(StreamableHTTP 类型)

《SpringBoot改造MCP服务器的详细说明(StreamableHTTP类型)》本文介绍了SpringBoot如何实现MCPStreamableHTTP服务器,并且使用CherryStudio... 目录SpringBoot改造MCP服务器(StreamableHTTP)1 项目说明2 使用说明2.1

MyBatis-Plus通用中等、大量数据分批查询和处理方法

《MyBatis-Plus通用中等、大量数据分批查询和处理方法》文章介绍MyBatis-Plus分页查询处理,通过函数式接口与Lambda表达式实现通用逻辑,方法抽象但功能强大,建议扩展分批处理及流式... 目录函数式接口获取分页数据接口数据处理接口通用逻辑工具类使用方法简单查询自定义查询方法总结函数式接口

SQL中如何添加数据(常见方法及示例)

《SQL中如何添加数据(常见方法及示例)》SQL全称为StructuredQueryLanguage,是一种用于管理关系数据库的标准编程语言,下面给大家介绍SQL中如何添加数据,感兴趣的朋友一起看看吧... 目录在mysql中,有多种方法可以添加数据。以下是一些常见的方法及其示例。1. 使用INSERT I