阿里开源 DL 框架;4000台服务器真实数据集;明年1月开源Blink

2023-11-21 15:59

本文主要是介绍阿里开源 DL 框架;4000台服务器真实数据集;明年1月开源Blink,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!


阿里开源 DL 框架;4000台服务器真实数据集;明年1月开源Blink

每周一早晨,阿里妹为你呈现最新的阿里技术资讯。这份“技术早餐”里,包含重磅的阿里技术新闻。五分钟时间,让你成为“周博通”。

还有,圣诞节即将到来,阿里妹在此提前祝所有小伙伴节日快乐。

话不多说,这就为你送上新鲜出炉的“技术早餐”。

阿里开源首个深度学习框架 X-Deep Learning

阿里开源 DL 框架;4000台服务器真实数据集;明年1月开源Blink

以深度学习为核心的人工智能技术,过去的几年在语音识别、计算机视觉、自然语言处理等领域获得了巨大的成功,其中以GPU为代表的硬件计算力,以及优秀的开源深度学习框架起到了巨大的推动作用。

尽管以TensorFlow、PyTorch、MxNet等为代表的开源框架已经取得了巨大的成功,但是当我们把深度学习技术应用在广告、推荐、搜索等大规模工业级场景时,发现这些框架并不能很好的满足我们的需求。

X-DeepLearning正是面向这样的场景设计与优化的工业级深度学习框架,经过阿里巴巴广告业务的锤炼,XDL在训练规模和性能、水平扩展能力上都表现出色,同时内置了大量的面向广告/推荐/搜索领域的工业级算法解决方案。

X-DeepLearning(包括核心训练引擎及算法解决方案)的代码已经在Github开源,地址如下:

https://github.com/alibaba/x-deeplearning

阿里开源4000台服务器真实数据集

阿里开源 DL 框架;4000台服务器真实数据集;明年1月开源Blink

2015 年,阿里巴巴的数据中心,将延迟不敏感的批量离线计算任务和延迟敏感的在线服务部署到同一批机器上运行,让在线服务用不完的资源充分被离线使用以提高机器的整体利用率。

经过 3 年多的试验论证、架构调整和资源隔离优化,目前这个方案已经走向大规模生产。我们通过混部技术将集群平均资源利用率从 10% 大幅度提高到 45%。另外,通过各种优化手段,可以让更多任务运行在数据中心,将“双11”平均每万笔交易成本下降了 17%。

为了让有兴趣的学生以及相关研究人员,可以从数据上更加深入地理解大规模数据中心,我们特别发布了这份数据集(Alibaba Cluster Data V2018)。数据集中记录了某个生产集群中服务器以及运行任务的详细情况。我们希望这波数据的发布可以拉近我们与学术研究、业界同行之间的距离,促进行业的进一步发展。

下载地址:

https://github.com/alibaba/clusterdata/blob/v2018/cluster-trace-v2018/trace_2018.md

阿里巴巴内部 Blink 将于明年1月开源

阿里开源 DL 框架;4000台服务器真实数据集;明年1月开源Blink

今年,实时流计算技术开始步入主流,实时流计算引擎和 API 诸如 Spark Streaming、Kafka Streaming、Beam 和 Flink 持续火爆。阿里巴巴自 2015 年开始改进 Flink,并创建了内部分支 Blink,目前服务于阿里集团内部搜索、推荐、广告和蚂蚁等大量核心实时业务。

12 月 20 日, Flink Forward China 峰会在北京国家会议中心召开。在大会的主题演讲上,阿里巴巴集团副总裁周靖人宣布,阿里巴巴内部 Flink 版本 Blink 将于 2019 年 1 月正式开源!我们希望通过 Blink 开源进一步加深与 Flink 社区的联动,并推动国内更多中小型企业使用 Flink。

持续关注阿里技术公众号,我们将第一时间带来 Blink 开源的详细信息。

精心筹备30个月,阿里首家未来酒店FlyZoo Hotel正式开业

阿里开源 DL 框架;4000台服务器真实数据集;明年1月开源Blink

全场景人脸识别住宿、智能梯控、机器人调酒、机器人送拖鞋……近日,阿里巴巴在杭州开的首家未来酒店FlyZoo Hotel(中文名字“菲住布渴”)终于迎来开业。

“菲住布渴”酒店依托阿里强大的技术与生态支持,实现了全场景身份识别响应和大面积的AI智能服务。住客从大堂到电梯再到房间,乃至餐厅、健身房等场地,都涵盖人脸识别、语音控制、智能机器人等黑科技服务。酒店无前台,大堂有服务大使,可以随时响应住客的需要。

如果住客需要多些护肤品、缺双拖鞋、叫个餐什么的,也不用再麻烦拨打前台电话,通过天猫精灵就行。收到指令后,后台的工作人员会把东西准备好,再让机器人为您送货上门。除此之外,在餐厅,给客人上菜的也是机器人服务员;去大堂演艺吧,机器人调酒师,还会给住客制作多种不同的酒类和咖啡。

这些沉淀下的能力将很快有机会赋能到相关行业。而坐落在亲橙里的这座未来酒店,也将同身边的智慧门店、新餐饮等一道,共同在这个新零售体验中心,为人们带来关于未来的更多想象。

这篇关于阿里开源 DL 框架;4000台服务器真实数据集;明年1月开源Blink的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/403394

相关文章

MySQL MCP 服务器安装配置最佳实践

《MySQLMCP服务器安装配置最佳实践》本文介绍MySQLMCP服务器的安装配置方法,本文结合实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下... 目录mysql MCP 服务器安装配置指南简介功能特点安装方法数据库配置使用MCP Inspector进行调试开发指

在Windows上使用qemu安装ubuntu24.04服务器的详细指南

《在Windows上使用qemu安装ubuntu24.04服务器的详细指南》本文介绍了在Windows上使用QEMU安装Ubuntu24.04的全流程:安装QEMU、准备ISO镜像、创建虚拟磁盘、配置... 目录1. 安装QEMU环境2. 准备Ubuntu 24.04镜像3. 启动QEMU安装Ubuntu4

SQL Server修改数据库名及物理数据文件名操作步骤

《SQLServer修改数据库名及物理数据文件名操作步骤》在SQLServer中重命名数据库是一个常见的操作,但需要确保用户具有足够的权限来执行此操作,:本文主要介绍SQLServer修改数据... 目录一、背景介绍二、操作步骤2.1 设置为单用户模式(断开连接)2.2 修改数据库名称2.3 查找逻辑文件名

canal实现mysql数据同步的详细过程

《canal实现mysql数据同步的详细过程》:本文主要介绍canal实现mysql数据同步的详细过程,本文通过实例图文相结合给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的... 目录1、canal下载2、mysql同步用户创建和授权3、canal admin安装和启动4、canal

使用SpringBoot整合Sharding Sphere实现数据脱敏的示例

《使用SpringBoot整合ShardingSphere实现数据脱敏的示例》ApacheShardingSphere数据脱敏模块,通过SQL拦截与改写实现敏感信息加密存储,解决手动处理繁琐及系统改... 目录痛点一:痛点二:脱敏配置Quick Start——Spring 显示配置:1.引入依赖2.创建脱敏

详解如何使用Python构建从数据到文档的自动化工作流

《详解如何使用Python构建从数据到文档的自动化工作流》这篇文章将通过真实工作场景拆解,为大家展示如何用Python构建自动化工作流,让工具代替人力完成这些数字苦力活,感兴趣的小伙伴可以跟随小编一起... 目录一、Excel处理:从数据搬运工到智能分析师二、PDF处理:文档工厂的智能生产线三、邮件自动化:

Python数据分析与可视化的全面指南(从数据清洗到图表呈现)

《Python数据分析与可视化的全面指南(从数据清洗到图表呈现)》Python是数据分析与可视化领域中最受欢迎的编程语言之一,凭借其丰富的库和工具,Python能够帮助我们快速处理、分析数据并生成高质... 目录一、数据采集与初步探索二、数据清洗的七种武器1. 缺失值处理策略2. 异常值检测与修正3. 数据

pandas实现数据concat拼接的示例代码

《pandas实现数据concat拼接的示例代码》pandas.concat用于合并DataFrame或Series,本文主要介绍了pandas实现数据concat拼接的示例代码,具有一定的参考价值,... 目录语法示例:使用pandas.concat合并数据默认的concat:参数axis=0,join=

C#代码实现解析WTGPS和BD数据

《C#代码实现解析WTGPS和BD数据》在现代的导航与定位应用中,准确解析GPS和北斗(BD)等卫星定位数据至关重要,本文将使用C#语言实现解析WTGPS和BD数据,需要的可以了解下... 目录一、代码结构概览1. 核心解析方法2. 位置信息解析3. 经纬度转换方法4. 日期和时间戳解析5. 辅助方法二、L

使用Python和Matplotlib实现可视化字体轮廓(从路径数据到矢量图形)

《使用Python和Matplotlib实现可视化字体轮廓(从路径数据到矢量图形)》字体设计和矢量图形处理是编程中一个有趣且实用的领域,通过Python的matplotlib库,我们可以轻松将字体轮廓... 目录背景知识字体轮廓的表示实现步骤1. 安装依赖库2. 准备数据3. 解析路径指令4. 绘制图形关键