这才是真正适合小白的教程:Python有什么用?数据化经营怎样做?

01 用Python做数据化经营
Python是什么?数据化经营又是什么?为什么要将Python用于数据化经营?本节先来答复这几个问题。
1. Python是什么
Python是一种面向对象的解释型计算机程序设计语言,由荷兰人Guido van Rossum于1989年发明,第一个公开版发行于1991年。Python开发的初衷其实是一个开发程序语言,而非专门用于数据工作和科学计算的数据解决或者建模程序(当然,现在已经是了)。
为什么我们要选择Python而非其余语言(例如R)进行数据解决、分析和挖掘呢?这是由于Python先天和后天具备的少量特殊条件和能力,使其成为目前企业(尤其是大数据领域)做数据化经营最为合适的工具。
开源/免费:使用Python(及其第三方库)毋庸购买产品、受权或者license费用,无论对于个人还是对于企业都是如此。
可移植性:Python程序可以跨Windows、Linux、Mac等多平台运行,这点决定了它的移植性非常强,一次开发,多平台应用。
丰富的结构化和非结构化数据工作库和工具:Python除了自带数学计算库外,还包括丰富的第三方库和工具,例如用于连接Oracle、MySQL、SQLite等数据库的连接库,数据科学计算库Numpy、Scipy、Pandas,文本解决库NLTK,机器学习库Scikit-Learn、Theano,图形视频分析解决和挖掘库PIL和Opencv,以及开源计算框架TensorFlow等。
强大的数据获取和集成能力:Python除了可以支持多种类型的文件(图像、文本、日志、语音、视频等)和数据库集成外,还能通过API、网络抓取等方式获取外部数据,内、外部数据源整合、多源数据集成、异构数据并存、多类型数据交错正是当前企业数据经营的基本形态。
海量数据的计算能力和效率:当面对超过GB甚至TB规模的海量数据时,传统数据工具通常无法支撑,更不要提计算效率了。Python对于这个规模数据的计算能力和工作效率要远超过其余数据工作语言。
与其余语言的集成:Python具有“胶水”能力,能与Java、C、C++、MATLAB、R等语言集成使用,这意味着既可以把其余语言写成的脚本嵌入Python,也可以把Python脚本嵌入其余语言。
强大的学习交流和培训资源:Python已经成为世界上最主流的编程语言和数据解决工作的核心工具之一,有非常多的社区、博客、论坛、培训机构、教育机构提供交流和学习的机会。
开发效率高:Python语言简洁、规范,使得在使用Python开发程序时用时更少。这对于以效率优先的程序工作或者验证性项目来说非常关键,效率决定商机。
简单易学:Python语法简单,即便是没有任何代码基础的人也能在几个小时内掌握基本的Python编程技巧,这对于初学者而言至关重要,由于这说明编程式数据分析不再遥不可及,他们能像使用Excel一样使用Python。
总而言之,在具有肯定Python经验和技巧的情况下,几乎没有Python无法胜任的工作场景!假如有,那么用Python调用其余语言或者用其余语言调用Python后,就会胜任。

02 数据化经营是什么
数据化经营是指通过数据化的工具、技术和方法,对经营过程中的各个环节进行科学分析、引导和应用,从而达到优化经营效果和效率、降低成本、提高效益的目的。
经营是一个范围“弹性”非常大的概念,最大可以延伸到所有公司的事务管理,最小可能只包括网站经营管理工作。经营的范围包括会员经营、商品经营、流量经营和内容经营4方面内容。
1. 数据化经营的重要意义
数据化经营的核心是经营,所有数据工作都是围绕经营工作链条开展的,逐渐强化数据对于经营工作的驱动作用。数据化经营的价值表现在对经营的辅助、提升和优化上,甚至某些经营工作已经逐渐数字化、自动化、智能化。
具体来说,数据化经营的意义如下:
1)提高经营决策效率。在信息瞬息万变的时代,抓住转眼即逝的机会对企业而言至关重要。决策效率越高意味着可以在更短的时间内做出决策,从而跟上甚至领先竞争对手。数据化经营可使辅助决策更便捷,使数据智能引发主动决策思考,从而提前预判决策时机,并提高决策效率。
2)提高经营决策正确性。智能化的数据工作方式,可以基于数据科学方法进行数据演练,并得出可量化的预期结果,再配合决策层的丰富经验,会提高经营决策的正确性。
3)优化经营执行过程。数据化经营可以通过标准口径的数据、信息和结论,为经营部门提供标准统一、目标明确的KPI管理,结合数据化的工作方法和思路,优化经营过程中的执行环节,从而降低沟通成本、提高工作效率、提升执行效果。
4)提升投资回报。数据化经营过程中,通过对持续的正确工作目标的树立、最大化工作效率的提升、最优化工作方法的执行,能有效降低企业冗余支出,提升单位成本的投资回报。
2. 数据化经营的两种方式
从数据发挥作用的角度来看,数据化经营分为辅助决策式数据化经营和数据驱动式数据化经营。
(1)辅助决策式数据化经营
辅助决策式数据化经营是经营的决策支持,它是以决策主题为中心的,借助计算机相关技术辅助决策者通过数据、模型、知识等进行业务决策,起到帮助、协助和辅助决策者的目的。例如,通过为决策者提供商品促销销量信息,对企业的促销活动提供有关订货、销售等方面的支持。
(2)数据驱动式数据化经营
数据驱动式数据化经营是指整个经营运作流程以最大化结果为目标,以关键数据为触发和优化方式,将经营业务的工作流程、逻辑、技巧封装为特定应用,借助计算机技术并结合企业内部流程和机制,形成一体化的数据化工作流程。例如,个性化推荐就是一种数据驱动数据化经营方式。
辅助决策式数据化经营和数据驱动式数据化经营是两个层次的数据应用,数据驱动相对于辅助决策的实现难度更高、数据价值表现更大。
辅助决策式数据化经营为业务决策方服务,整个过程都由经营人员掌控,数据是辅助角色。
数据驱动式数据化经营的过程由数据掌控,数据是主体,实现该过程需要IT、自动化系统、算法等支持,数据驱动具备自主导向性、自我驱动性和效果导向性。
注意:因为数据和流程本身会存在缺陷,同时经营业务通常都有强制性规则的需求,因而即便在数据驱动式数据化经营过程中也会加入人工干预因素。但即便如此,数据作为数据驱动的核心是不变的,也就是说,数据是决策主体本身。
3. 数据化经营的工作流程
上文我们详情了数据化经营的两种方式:辅助决策式数据化经营和数据驱动式数据化经营。其中数据驱动式数据化经营具体取决于应用场景,不同的场景,其具体工作流程不同。本节重点详情数据驱动式数据化经营的工作流程。
数据驱动式数据化经营工作包含数据和经营两个主体,在实际工作过程中需要二者协同。在某些大型工作项目上,还有可能涉及与IT部门、信息中心等部门的联动。其工作流程分为3个阶段,如图1-1所示。

▲图1-1 数据驱动式数据化经营工作流程
(1)第1阶段:数据需求沟通
该阶段主要包括需求产生和需求沟通两个步骤。
1)需求产生:由经营部门产生的某些数据化经营需求,例如预测商品销量、找到异常订单、确定营销目标人群名单等。
2)需求沟通:针对经营部门提出的需求进行面对面沟通和交流,沟通主要包含3方面:
一是业务需求沟通,包括需求产生的背景、要处理的问题、预期达到的效果等;
二是数据现状沟通,包括数据存储环境、主要字段、数据字典、数据量、升级频率、数据周期等,假如没有数据则需要制定数据采集规则并开始采集数据,该过程中可能需要IT部门的协助;
三是数据与分析的关联性沟通,根据与经营人员的沟通,理解业务背景下哪些是常见的、带有业务背景的数据、不同场景会导致数据如何变化、分析中会涉及哪些关键字段或者场景数据等,业务人员丰富的经验会帮助数据工作者少走很多弯路。
(2)第2阶段:数据分析建模
从这一阶段开始进入正式的数据工作流程,包括获取数据、数据预解决、数据分析建模和数据结论输出4个步骤。
1)获取数据:数据化经营分析所需的数据需要经过特定受权从数据库或者文件中得到。
2)数据预解决:在该过程中对数据进行质量检验、样本均衡、分类汇总、合并数据集、删除重复项、分区、排序、离散化、标准化、过滤变量、转置、查找转换、脱敏、转换、抽样、异常值和缺失值解决等。
3)数据分析建模:运用多种数据分析和挖掘方法,对数据进行分析建模。方法包括统计分析、OLAP分析、回归、聚类、分类、关联、异常检测、时间序列、协同过滤、主题模型、路径分析、漏斗分析等。
4)数据结论输出:数据结论的输出有多种方式,常见的方式是数据分析或者挖掘建模报告,另外还包括Excel统计结果、数据API输出、数据结果返回数据库、数据结果直接集成到应用程序中进行自动化经营(例如短信营销)。
(3)第3阶段:数据落地应用
该阶段是数据化经营落地的关键阶段,前期所有的准备和解决工作都通过该阶段产生价值。该阶段包括数据结论沟通、数据部署应用及后续效果监测和反馈3个步骤。
1)数据结论沟通:对于输出为报告、Excel统计结果等形式的内容,通常都需要与经营对象进行深入沟通,主要沟通的内容是将通过数据得到的结论和结果与业务进行沟通,通过沟通来初步验证结论的正确性、可靠性和可行性,并对结果进行修正。假如没有可行性,那么需要返回第2阶段重新开始数据分析建模流程。
2)数据部署应用:经过沟通具备可行性的数据结论,可直接应用到经营执行环节。例如,将预测结果作为下一个月的KPI目标,将选择出来的客户作为重点用户进行二次营销。
3)后续效果监测和反馈:大多数的数据化经营分析都不是“一次性”的,尤其当已经进行部署应用之后,需要对之前的数据结论在实践中的效果做二次验证,若有必要则需要进行结论的再次修正和意见反馈。
很多人认为数据化经营工作应该从数据产生之后开始,这是错误的观念,起因在于数据化经营工作的起始是需求产生,而需求的产生与数据的产生往往没有必然关系。

03 Python用于数据化经营
Python用于数据化经营,将充分利用Python的强大功能和效率来满足数据化经营的复杂需求。
Python可以将数据化经营过程中来源于企业内外部的海量、多类型、异构、多数据源的数据有效整合到一起,提供丰富的集成、开发、分析、建模和部署应用。
Python高效的开发效率能帮助数据化经营在最短的时间内进行概念验证,并提供科学的预测结果,为数据化经营的快速和精确提供基础。
Python可以将数据工作流程和IT工作流程无缝对接,有利于实现数据工作与经营工作的融合。这也是数据驱动式数据化经营的工作方法,有利于真正实现数字化、智能化的经营工作。
04 Python程序
1. Python 2还是Python 3
目前,Python依然是两个系列的版本并存,一个是Python 2,另一个是Python 3。这两个版本的语法不完全兼容,因而两个版本的程序调用对方的执行脚本将很可能报错。
假如没有特殊需求,大多数场景下选择Python 3都是一个正确的选择。但结合特定场景,笔者还是给出以下具体建议:
假如想要成熟、可靠且稳固的程序,选择Python 2和Python 3都可以。
假如只是学习或者理解一下Python,优选Python 3。
假如是企业内部应用,有历史程序需要执行和开发,具体看企业用的是哪个版本。
假如你的工作中需要大量的第三方库,而且是比较早期的库,那么使用Python 2。但更多情况下,即便那些只支持Python 2的库不再升级了,也有很多替代库可以实现,因而假如不是必需使用Python 2,还是建议使用Python 3。
假如你的程序需要在Linux服务器上运行且使用其原生程序,那么去看看你的Linux服务器自带的Python版本(通常Linux服务器上自带Python 2的居多)。同样的,即便Linux原生带的程序版本低,依然可以安装并使用Python 3。
假如上述没有任何一个场景满足你的需求,那么就从Python 3开始吧。
2. 32位还是64位
大多数情况下,假如没有特殊需求,尽量选择64位版本。
笔者选择了64位Python,3.7版本。选择64位的起因是它能应对更大容量的数据应用,用Python 3除了由于这是趋势外,还有一个重要起因是Numpy已经宣布从2019年1月1日起新功能将只支持Python 3,相信很多系统和工具也开始慢慢放弃对Python 2的支持了。
3. Python环境的搭建
一般情况下,我们可以直接到Python官网https://www.python.org下载需要的版本,而后在安装好Python程序后根据需要自己设置安装其余相关库和包。但对大多数首次接触Python的读者来讲,假如能有“一键安装”就更好了。在此,我们详情Anaconda。
Anaconda是一个Python发行版本,其包含了conda、Python等180多个科学包及其依赖项,它是科学计算领域非常流行的Python包以及集成环境管理的应用。它的优势主要体现在以下几个方面:
默认可以帮你安装好Python主程序,而不用单独下载安装。
常用的数据工作包,包含数据导入、清洗、解决、计算、展现等各个环节的主要包都已经安装好,如Pandas、Numpy、Scipy、Statsmodels、Scikit-Learn(sklearn)、NetworkX、Matplotlib等。常用的非结构化数据解决工具也一应俱全,如beautifulsoup4、lxml、NLTK、pillow、scikit-image等。
很多包的安装有依赖,这点在Linux系统上非常常见,而Anaconda已经将这些依赖的问题统统处理。尤其在离线环境下做Python和大量库的安装部署工作时,Anaconda大大降低了实施难度,是项目开发过程中必不可少的有效工具。
提供了相似于pip的包管理功能的命令conda,可以对包进行展现、升级、安装、卸载等常用操作。当然,假如你更喜欢pip,依然可以继续使用该命令,由于Anaconda默认也安装了该命令。
多平台、多版本的通用性,而且紧跟Python主程序升级的步伐。Anaconda支持Windows、Mac OS和Linux系统,且同时包含32位和64位的Python版本(Python 2和Python 3全都支持)。
提供了IPyton、Jupyter、Spyder交互环境,可以直接通过界面化的方式引导客户操作,易用程度非常高,甚至连具体细分的学习资源都准备好了。
要安装Anaconda环境,只要要登录https://www.anaconda.com/download下载对应版本的安装包就可,如图1-2所示。目前Anaconda发行的最新Python版本包括32位和64位的Python 2.7和Python 3.7。

▲图1-2 Anaconda下载页面
以Windows64位Python 3.7版本为例,下载完成后,会在本地计算机中存在.exe文件,安装过程只要使用默认配置就可。
关于作者:宋天龙,深大数据技术专家,触脉咨询合伙人兼副总裁,前Webtrekk中国区技术和咨询负责人(德国最大在线数据分析服务提供商)。擅长数据挖掘、建模、分析与经营,精通端到端数据价值场景设计、业务需求转换、数据结构梳理、数据建模与学习以及数据工程交付。在电子商务、零售、银行、保险等多个行业拥有丰富的数据项目工作经验。
今天的分享就到此结束,假如我的分享对你有帮助,也欢迎大家转发我的文章让更多人受益,假如你在学习Python的过程当中有遇见任何疑问,可以加入我的python交流学习qq群:250933691,多多交流问题,互帮互助,群里有不错的学习教程和开发工具。学习python有任何疑问(学习方法,学习效率,如何就业),可以随时来咨询我
1. 本站所有资源来源于用户上传和网络,如有侵权请邮件联系站长!
2. 分享目的仅供大家学习和交流,您必须在下载后24小时内删除!
3. 不得使用于非法商业用途,不得违反国家法律。否则后果自负!
4. 本站提供的源码、模板、插件等等其他资源,都不包含技术服务请大家谅解!
5. 如有链接无法下载、失效或广告,请联系管理员处理!
6. 本站资源售价只是摆设,本站源码仅提供给会员学习使用!
7. 如遇到加密压缩包,请使用360解压,如遇到无法解压的请联系管理员
开心源码网 » 这才是真正适合小白的教程:Python有什么用?数据化经营怎样做?