区块链技术如何推动社会创新:基于Gravity共享计算平台的商品分类机器学习实践

  火眼云商品智能归类项目,是 Gravity计算网络中第一个利用 NLP和机器学习的大数据项目。

  火眼云利用大数据 +AI 实现营销自动化,助力 B2B 行业高效发展。面对数据的规模化增长,数据分析的算力需求也与日俱增。Gravity 提供了基于容器的大数据云计算服务,通过开箱即用的容器调度服务和容器编排服务,为火眼云提供了低成本高效的云计算平台。

  Gravity 机器学习利用容器技术将算法和模型分离通过容器编排技术实现业务逻辑。如下是机器学习的 4 个过程:

  

  Gravity 通过对多个特征模型运用不同的分类器组合来训练数据,不同的算法组合通过 Gravity 容器编排技术组合成一个工作流进行调度,如下图是一个工作流示意图:

  

  商品类目的预测,归根结底是一个分类问题,一个有监控的机器学习问题。每个标准类目可以看成是一个分类,程序需要自动把商品划分到各个分类中。火眼云类目预测需要面对几个问题:

  1. 类 目 数 量 多

  火眼云数据类目覆盖广,类目数量多则极大增加了分类空间,提高了分类复杂度,同时不同类目的类目层次不同,由一级目录到四级目录,层次越深需要分类的计算量越大。

  2. 分 类 空 间 不 同

  不同类目的叶子类目个数不同,叶子类目越多则叶子类目之间区分度越小,分类难度越大,在机器学习模型训练过程中不同类目对计算需求不同,算力需求随着子类目数量动态变化。

  3. 商 品 描 述 多 样

  火眼云数据规格不一,商品标题描述复杂不一,部分数据不具有明显的类目特征,部分数据包含多种产品词或类目词,同时还有中文英文标题,需要根据不同的特征采用不同的分类算法,模型训练需要根据特征筛选来编排选择模型容器。

  Gravity 通过边缘节点的容器调度能力,实现零停机、负载均衡和高效扩容。通过 Gravity 的资源调度算法自动为分布式模型训练分配容器资源以满足不同类目深度的算力需求;另一方面通过业务的编排组织对模型训练过程进行定制,实现不同特征的自适应算法。

  Gravity 通过对容器工作流的编排能够实现数据训练的深度迭代,未来随着数据的不断积累和模型训练的增量迭代,预测准确率会越来越高。

文章内容系本站作者个人观点,不代表本站对其观点赞同或支持,文章的版权归该作者所有。如需转载,请注明文章来源。本文地址:http://www.cis.net.cn/kejikuaixun/44370.html
留言与评论(共有 条评论)
验证码:

最新文章

基于Gravity共享计算平台的商品分类机器学习实践

科技快讯
火眼云商品智能归类项目,是Gravity计算网络中第一个利用NLP和机器学习的大数据项目。火眼云利用大数据+AI实现营销自动化,助力B2B行业高效发展。面对数据的规模化增长,数据分析的算力需求也与日俱增。Gravit

预测比特币归零,你会名誉扫地

科技快讯
比特币(BTC)本周走势不错,上涨了8%。但是读过新闻你可能就不会这么想了。瞥一眼几家主流媒体的报道,你可能会发现比特币正在崩溃,正在归零。用这种低劣的手段攻击比特币引发人们的愤怒可以吸引大量的流量。但这也是一种看起来很蠢的方式。主流

数字货币争议依旧 区块链发展前景仍被看好

科技快讯
今年以来,比特币最高涨幅达300%,然而,6月以来,比特币和众多虚拟货币的价格进入震荡回调期,其底层技术区块链的拥堵问题也逐渐暴露。与此同时,动辄几十分钟就能筹集上千万资金的虚拟货币融资(ICO)的火爆,也开始引起各方包括监管部门的关注。

USDT有哪些种类

科技快讯
近日,数据显示,TRC20—USDT流通量突破10亿枚,有小伙伴就问,TRC20,ERC20这些USDT究竟都有哪些区别?今天,白话区块链为大家简单介绍下市场上主要存在着3种不同类型的USDT。1.三种不同类型的USDTUSD

区块链能带来什么(区块链到底有什么用)

科技快讯
日前,2018世界开发者大会在奥地利维也纳举行。苹果公司联合创始人史蒂夫沃兹尼亚克(SteveWozniak)作了开幕演讲,他在演讲中表示了对和技术的肯定。据CointelegraphaufDeutsch周三报道,沃兹尼亚克认为区块链是个很不错的想法,并表示:区块链即将引发下一场IT领域的重大革命。紧接着,沃兹尼亚克发表

万向区块链肖风专访:ICO是区块链与生俱来的特性,是金融深化的终局

科技快讯
文/万向控股有限公司副董事长、万向区块链股份公司董事长兼总经理,万向区块链实验室发起人肖风本文首刊于2017年6月5日出版的《财经》杂志,编辑王东去年初,我应邀到一个中部城市,参加一场关于大数据与区块链的研讨会。看到政府安排来接站的司机开着的是一辆私家车,于是我好奇地问他是属于哪一家机构:政府接待办、出租汽车公司还是汽

DeFi(去中心化金融)流动性模型

科技快讯
前言:DeFi发展路线不同,结果产生极大差异。Augur、0x、Dharma和Uniswap、Compound以及Maker采用三种不同路线。目前看Maker遥遥领先,Compound和Uniswap望其项背,而0x、Augur则需快马加鞭,迎头赶上。本文作者是AlexEvans,由“蓝狐笔记”公众号“SL”翻译。随着开放金融协议的潜力变得越加清晰,一些应用比其他应用的采用速度更快。就

以太坊价格分析:以太坊兑美元价格走高

科技快讯
以太坊的价格正盯着美元和比特币的进一步上涨,而以太坊兑美元可能很快就会突破300美元。以太坊价格小时图来源:金色财经重点关注:以太坊价格维持在255美元以来,并继续看涨,看涨幅度预计更大。一个主要的看涨趋势线正在形成,在以太坊兑美元的小时图上,268美元将是其关键支撑位。以太坊兑美元正在进一步上涨,可能会突破287美元的阻力位

闪电比特币(LBTC)让比特币的传输速度快如闪电

科技快讯
继比特币现金、比特币黄金、比特币钻石和超级比特币之后,另一枚分叉“闪电”比特币即将到来。该项目由一个欧洲团队发起,“闪电比特币”项目将成为第一个采用DPOS共识机制的分叉币。分叉发生在区块高度#499999新项目“闪电比特币”(LBTC)预计于2017年12月23

比特币区块链核心技术详解

科技快讯
区块链的出现主要解决的是传统中心化网络部署方式所带来的众多问题,包括:1)交易非公开化,中心节点掌握分布节点信息,分节点不掌握其他节点信息;2)系统安全性取决于中心节点安全性,中心节点存在道德风险,可利用大数据进行数据变现,存在隐私泄露风险;3)系统风险性随着网络规