专注网络推广外包服务,大幅降低您的推广费用                                                                                                                咨询电话:135-3866-1001 投诉电话:173-0661-5992

 百度商业服务市场合作伙伴

图片展示

联通大数据实操:CDH部署多版本Python环境及搭建

发表时间: 2020-10-04 18:44:16

作者: 广东网罗天下信息技术有限公司

浏览: 17

小编:由于其易用性好,以及现在机器学习和人工智能的崛起,Python成为当前非常火热的一门语言。承载多租户的大数据平台往往对于Python版本和第三方库有很多个性化的需求, 联通大数据
✅网罗天下是一站式网络推广外包服务平台 ✅提供全方位的网络推广外包服务 ✅按词收费的seo优化关键词排名服务

小编:由于其易用性好,以及现在机器学习和人工智能的崛起,Python成为当前非常火热的一门语言。承载多租户的大数据平台往往对于Python版本和第三方库有很多个性化的需求, 联通大数据

由于其易用性好,以及现在机器学习和人工智能的崛起,Python成为当前非常火热的一门语言。承载多租户的大数据平台往往对于Python版本和第三方库有很多个性化的需求,联通大数据平台承载了百度、阿里、腾讯、苏宁、京东等上百个租户,在租户部署模型时就会要求集群计算节点拥有不同类别的Python科学计算包。下文将主要讲述如何在CDH集群基于二次打包的Anaconda安装包部署Python多版本运行环境,并搭建本地Python第三方库。

基于Anaconda部署Python3

一般生产环境默认python版本为2.7,为了提供多版本python开发环境。需要先下载anaconda的parcel安装包并解压到本地,安装python3虚拟环境,然后安装集群计算节点所需要的常用python第三方包,如TensorFlow等科学计算包。

需准备:

  • 电脑准备300G或以上的存储空间;

  • wget:下载某个源的所有package到本地;

  • Nginx:发布本地PyPI。

首先我们先进行Anaconda.Parcel的解压和Python3环境的创建:

***步:下载Anaconda的Parcel包。

第二步:解压Anaconda的Parcel包,安装Python3私有环境。

安装好后显示环境如下:

安装私有的Python第三方本地库,Python第三方库分为pip和Conda库两种安装方式(***我们选择Conda,比pip功能更强大,完善包及虚拟环境管理工具):

Conda私有库安装方式:

首先通过外网下载所有第三方包,第三方包在清华镜像站,虽然有部分包不是***版本,但下载速度快。

由于公司主机不能连接外网。这里就省事地通过Windows安装wget全量捞取页面所需包

✅网罗天下是一站式网络推广外包服务平台 ✅提供全方位的网络推广外包服务 ✅按词收费的seo优化关键词排名服务

网络营销相关新闻

帮助企业用不投广告或少投广告的方式通过网络接订单!

一站式网络推广外包服务商

 

 网罗天下的服务和优质资源

  14年技术开发,10年网络营销推广服务经验

 网络推广,我们更具营销思维

 掌握及时先进的技术 宣传推广 “秒达”目标客户群

 效果好不好,我们用数据说话

  让服务快速变现,销售额平均提升超300%

选择网罗天下的优势

量身定制,效果保障

 

选择网罗天下的优势

科学策略

实时监测网络推广市场动态

制定优质运营推广策略

 

节约成本

多平台整合营销经验

用更低成本保障投放和执行效果

 

关心成长

精英团队量身定制服务方案

帮助企业获得更好的营销效果

互联网新闻动态 

网罗天下有趣的新闻资讯

图片展示

一站式满足企业推广全部要求

2000+服务项目任您选 大平台 效果保障

没效果 退余额

多年丰富网络推广经验 全员严格培训 再上岗

Copyright  2005-2020

网罗天下 版权所有

粤ICP备18138808号 

广东网罗天下信息技术有限公司

企业信用信息公示系统(广东)


网络推广 网络推广服务 网络推广外包 网络推广公司 网络推广公司 品牌推广 

在线客服
联系方式
咨询热线
13538661001
上班时间
周一到周日
E-mail地址
13538661001@qq.com
二维码
二维码
在线客服