gg040722(1).docx

《gg040722(1).docx》由会员分享，可在线阅读，更多相关《gg040722(1).docx（28页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、山东财经大学本科毕业论文(设计)题目：基于python的电影票房预测系统设计与实现学 院 计算机科学与技术学院 专 业 电子商务 班 级 电子商务1702 学 号 20171817237 姓 名 原少将 指导教师 王艳玲 山东财经大学教务处制二 二一 年 三 月2山东财经大学学士学位论文山东财经大学学士学位论文原创性声明本人郑重声明：所呈交的学位论文，是本人在导师的指导下进行研究工作所取得的成果。除文中已经注明引用的内容外，本论文不含任何其他个人或集体已经发表或撰写过的研究成果。对本文的研究做出重要贡献的个人和集体，均已在论文中作了明确的说明并表示了谢意。本声明的法律结果由本人承担。学位论文作

2、者签名：年 月 日山东财经大学关于论文使用授权的说明本人完全了解山东财经大学有关保留、使用学士学位论文的规定，即：学校有权保留、送交论文的复印件，允许论文被查阅，学校可以公布论文的全部或部分内容，可以采用影印或其他复制手段保存论文。指导教师签名： 论文作者签名：年 月 日 年 月 日基于python的电影票房预测系统设计与实现摘 要近些年来，随着电影行业变得越来越热门，也为影院带来不小的票房收入。传统的影院都是依靠个人经验进行排片，但是由于影片的票房收入可能受多种因素的影响，排片多的电影最后的票房会远低于预期值，导致影院因安排失误而导致大量的票房损失。 基于此背景下，众多的影院希望有一个票房预

3、测系统能够预测电影的票房，为影院的排片进行指导，所以本文在了解了国内外研究现状后，在python语言的基础上，通过爬虫技术爬取中国电影网的各历史票房数据，利用多项式曲线拟合算法作为票房预测算法，实现了可对电影票房进行预测的python系统。通过应用本系统，能够为国内的影院提供点映过一段时间的电影的预测票房，为影院排片提供有一定影响的参考依据，减少因人为因素对电影排片而导致票房损失的事情发生。同时本系统能够进行票房数据预处理以及模型训练等功能，因为目前电影的票房是用户选择观看电影的重要指标，所以系统还能够及时的变更票房的实时数据和预测数据，具有非常好的应用前景和使用价值。关键词：多项式曲线拟合;

4、电影票房预测;爬虫;pythonAbstractIn recent years, with the film industry becoming more and more popular, it also brings a lot of box office revenue for the cinema. Traditional cinemas rely on personal experience to arrange films, but the box office revenue of films may be affected by many factors, and the fi

5、nal box office of films with more films will be far lower than the expected value, resulting in a lot of box office losses due to the wrong arrangement.Based on this background, many cinemas hope to have a box office prediction system to predict the box office of the movie and guide the movie arrang

6、ement. Therefore, Weanalyzetheresearchathomeandabroad the python language, this paper crawls the historical box office data of China film website through crawler technology, and uses polynomial curve fitting algorithm as the box office prediction algorithm to realize the box office prediction A pyth

7、on system that can predict the box office of a movie.Through the application of this system, it can provide domestic cinemas with the predicted box office of movies that have been shown for a period of time, provide reference basis for cinema film arrangement, and reduce the box office loss caused b

8、y human factors. At the same time, the system can carry out box office data preprocessing and model training, provide users with the trend of the box office, and effectively provide users with the prediction data of the box office, which has a very good application prospect and use value.Keywords: p

9、olynomial curve fitting; movie box office prediction; crawler; python 目 录一、绪论1（一）研究背景1（二）国内外研究现状1二、相关技术1（一）电影票房预测的相关方法21基于人口统计学的研究方法22基于MAAP评级的电影票房预测模型2（二）网络爬虫介绍31网络爬虫概述32页面爬取33页面存储4三、基于python的电影票房预测算法设计4（一）数据来源4（二）票房预测算法多项式曲线拟合4四、电影票房预测系统需求分析6（一）电影票房预测系统总体概述6（二）电影票房预测系统功能性需求61网络爬虫子模块6（三）电影票房预测系统非功能

10、性需求7五、电影票房预测系统设计7（一）电影票房预测系统整体架构7（二）数据的爬取与清洗子模块8（三）数据存储子模块9（三）票房预测子模块9六、电影票房预测系统实现9（一）系统整体架构实现9（二）网络爬虫子模块10（三）数据存储子模块12七、电影票房预测系统测试12（一）硬件环境配置12（二）软件环境配置12（三）Numpy库与Scipy库12（四）预测结果展示131电影历史票房结果展示132电影票房多项式曲线拟合结果展示133电影预测票房结果展示14参考文献15一、绪论（一）研究背景近年来，随着生活水平的提高，人民在解决温饱问题后，对生活中的娱乐项目越来越重视，这意味着恩格尔系数降低而娱乐消

11、费增加。电影在娱乐消费中的占比是非常高的，一部好的电影在世界各地广为流传，电影通过短短的几个小时向人民传递了太多信息，这些信息不仅是时事热点还有更多精神方面的启示。制作一部电影通常需要花费很多物力和财力，大家现在默认的把票房作为一部电影是否成功的标准，因为票房是投资者决定是否投资该电影的重要指标。那么怎么对票房进行一个精准的预测呢？精准的预测能够更好地说服投资者进行投资。我国文化娱乐产业的发展必然是随着经济实力的提升而升温的，在对国家新闻出版广电总局电影局的票房数据进行分析后得到以下信息:1.2007年全国总票房为21亿，十年之后2017年票房翻了20倍以上为457.12亿。2.2016年全国

12、总票房为440.8亿，一年之后2017年票房仅增加3.7%。3.2018年全国总票房为559亿，比2017年票房增加13.45%。以上数据都说明了票房的增加的前提是迎合观众对电影类型的偏好，2017年前后我们能发现票房数据有了质的飞跃，这得益于在2015年电影票房预测的流行。这篇文章将结合传统的电影票房预测方法和使用python等大数据分析，从而提高电影票房预测的精准度。（二）国内外研究现状经过研究大量的与电影票房有关的各种文献，我们很容易发现西方在该方面的理论体系更为完整，因为西方在工业革命后经济飞速发展，而我国还处于闭关锁国的状态，但是因为改革开放后我国经济有了极大的提升，所以我国也开对电

13、影票房的研究投入了更多的精力。电影票房预测从美国开始，最初的研究是通过对观众发放调查问卷，大家把这种研究称为“观众研究”，目的是通过对观众的电影类型票好进行简单的收集以此促进电影票房的增加。里奥德尔是电影研究局的工作人员，他和观众调查局的乔治盖洛普是“观众研究”的著名研究人员，但是他们用来采集和分析观众偏好的方法并不相同，但目的都是为了对票房产生影响和预估。他们为什么在众多研究者中脱颖日出呢？这是因为他们发现了影响票房的因素是非常多的，例如对电影的宣传程度、演员的知名度、观众的口碑以及电影所讲述的故事等，这些因素在后来的研究中被分析的更加透彻。不久之后，巴瑞李特曼第一次提出运用线性回归建立一个

14、电影收入预测模型，该模型的自变量和因变量分别是对票房产生影响的因素和电影票房收入。从二十一世纪初开始，互联网将全球连接起来，人与人之间的交流范围更加广阔的同时也意味着原来的电影票房的预测已经不在适用于当下。于是研究人员不在使用之前的研究方案，改变为在网络上对关于电影的评论进行一个汇总，构建一个更加精准的票房预测模型，于是微博、谷歌、推特等预测模型随之而来。二、相关技术本章主要介绍基于python的电影票房预测系统在从思路变为实际成果的有关方法和核心技术，它的包含范围极广，从胶片时代开始直到现在，我们对票房预测所使用过的各种方法直到互联网覆盖而通过网络爬虫获取的相关信息。（一）电影票房预测的相关

15、方法1915电影还处于胶片时代，票房预测开始萌芽，直到1960年研究者对于预测方法都处于探索阶段，从1980年开始，因为全球经济的进步，票房预测也进入了发展阶段。不管是在萌芽阶段和探索阶段研究者都用了大量的预测方式。1基于人口统计学的研究方法美国是第一个对电影票房进行研究的国家。美国在二十年代末经济属于虚假繁荣，在经济快速发展的假象下美国对电影发展投入了大量资本，可见美国电影进入了黄金时期，到了四十年代，科技进行了新一步革新，为了迎合观众喜好，对电影票房的研究也随之产生。对电影票房研究进行促进原因有：1、科技使人们的娱乐方式变得更加广泛，人们能够在家里通过看电视获得更多的信息，于是对电影的需求

16、降低，电影的销售到达了一个低谷。电影的投资成本极高，如果电影不能获得收益，那么投资者不会对电影进行注资，因此电影制片方开始对票房进行关注，而最能说服投资方的就是电影票房，电影票房预测变成了一个重要指标。2、美国是一个民主国家，极其重视民意。电影主要面向的是观众，所以观众的偏好决定了票房的走向，同时民意测验受到多个企业的推崇，因此电影业也随着潮流开始研究观众的偏好和寻找影响票房的因素。3、电影刚刚出现时，极少有人重视它的发展，为了电影这一娱乐方式在群众中流行起来，好莱坞通过与电影研究者们进行合作进而改变现状，研究者们得到了制作公司提供的大量的数据和资料，与此同时他们开始进行了观众调查，希望结合数

17、据和调查能够发现影响票房的因素，进而完善因素达到对电影票房提高的目的。但是一项重大的发现并不是能够轻易获取的，研究者们仅仅关注到了它们产生的独立影响，并没有发现它们的内在联系，所以不能构建模型。虽然在这个时期对预测模型的构建并没有成功，但是也出现了预测模型研究的里程碑人口统计学的截面调查法，它是由乔治盖洛普所提出的，他也是观众研究中的著名研究者。截面调查法主要是截面取样，也可以称为定额取样，调查人员的定额是通过总体的结构特征进行分配的，目的是得到与总体的结构特征差不多的样本。例如反映总体的信息主要是通过人口的年幼程度、男女性别来给调查人员规定了年龄不同、性别也不同的被调查人数，在使用这种抽样方

18、法时应该注意要准确的认识总体元素存在的结构特征，这是为了使定额的选择更为准确从而使样本具有代表性。研究者盖洛普也是观众研究中的一员，在使用民意调查法时为了使数据更加的真实、可靠，他会对数据进行筛选保证样本的代表性，他主要是在采样时考虑了更多的因素，这些因素的分类也更为细致。因此盖洛普的研究中，电影票房影响因素包有电影的片名、演员知名度、电影试映的效果、电影内容以及电影宣传。 2基于MAAP评级的电影票房预测模型在二十世纪八十年代，电影票房的研究也进入到了第二阶段，第二阶段的研究在第一阶段的前提下转变为发现更多的影响电影票房的因素。代表第二阶段研究的开始有很多，斯格特苏凯提出的预测模型是真正的能

19、够代表研究开始的标志。此预测模型基于第一阶段票房预测，增加了两个因素分别是是否获得奥斯卡奖项和MAAP评级，而建模方法上也有改变，主要是用回归分析的这一模型来构造电影票房的影响因子与收入之间的联系。乔治盖洛普的模型被斯格特苏凯进行了改进，但是票房数据的获取并不是一件容易的事，所以苏凯找到了代替电影票房数据的方法电影租金变量，苏凯的模型预测的范围更广，例如电影租金、电影的持续放映时间也称为放映周数。苏凯在选取电影票房影响因子上设置了22个影响因子，把市场集中度列入了影响因子之一是最重要的改变。我们一般把不同放映时期的市场竞争度称为市场集中度，它的计算公式是：市场集中度上映时期排名前四或排名前十电

20、影的一周票房本周所有电影总票房，当最后得到的数值越大时，市场集中度相应的越高也就意味着本周内上映的电影市场竞争力越大。回归方程对观测值的拟合程度我们称为拟合优度，其中判定系数R2是度量拟合优度的统计量的依据，它是回归平方和与总偏差平方和之间的比值，当判定系数越大时，则离平方和中能够由回归平方和解释的比例就越大，对模型的预测相应的就越精确，回归效果就更好。从数值方面当R2大于小于等于时，回归拟合的效果就越好，模型的拟合优度R2大于0.8时属于拟合度较好。（二）网络爬虫介绍大数据在现今使用的范围越来越广，网络爬虫是其中的重要组成。它是指一种按照固定的移动规则，自主的抓取万维网中信息的运行的程序或者

21、是程序的脚本。1网络爬虫概述网络爬虫技术在功能上分为了数据采集、数据处理以及数据存储。我们一般把从一个以及一个以上初始网页的URL称为传统的抓取工具，URL的获取是在最开始的网页上，我们在对网页进行抓取网页时，而新的URL是在对网页进行抓取时不断的被提取，只有满足系统停止条件是才会暂停抓取。爬虫工作是十分繁琐的，它需要的基础条件非常多，需要通过Web分析算法筛选掉很多无关的信息，而有用的链接就进入等待爬虫的URL队列中。接下来，它会在等待序列中搜寻到需要进行爬取的网页的URL，它会一直反复循环该爬取过程目的是找到符合系统的条件。除此之外，系统将会对爬虫爬取到的所有网页进行分析、存储、索引和过滤

22、，这大大的方便了数据查询和变更。2页面爬取我们在访问大多数网站时都需要登录，登录后我们才能对网站信息进行爬取。我们在登录时通常使用cookie，对它进行解释就是互联网所产生的页面，http协议运行的，然而http协议虽然是它运行的基础，但是它是一个无状态、无法维持会话以及无法保存的状态。它主要表现在登录网站后，对该网站进行多方面的访问时，登录状态会发生改变甚至直接掉线，可是它的重新登录时非常麻烦的，因为网页会不断更新，而重新更新的页面我们都需要登录，因此保存登录信息cookie和session是十分重要的。cookie可以对所有的会话信息在客户端进行保存，这个时候访问同一个网站的其他网页时，就

23、直接从cookie中提取到之前保存的相关会话信息；我们使用session时，它可以直接把相应的会话信息都保存在服务端，而存在客户端的cookie信息中还存在处于服务端的session、id等信息，用户打开同一个网站的其他网页时，我们在cookie中读取到相关信息时便是通过session、id搜寻到服务器中对应的完整的session信息进行会话控制。综上，cookie是访问任意网站的基础。综上所述我们在使用爬虫进行信息获取时，通常用python中的urllib方法保存已经登录的cookie，该种方法可以自己进行页面信息的爬取，自主选择re、bs4、lxml中的一种解析方法读取保存的源代码并进行解

24、析，最后成功找到目标数据所在的特定标签，进行网页结构的解析。3页面存储当得到解析的数据后，定义函数把获取的目标数据保存到csv文件中，最后使用框架式流程结构，通过参数传递实现整个数据的爬取。三、基于python的电影票房预测算法设计（一）数据来源本文主要使用了电影基本和电影票房两个数据，数据均来源于中国票房网，主要包括电影基本信息，电影发行时间以及历史票房数据，从表3-1中可以直观看到具体数据所示：表3-1 初始数据表电影数据类别基本信息发行时间历史票房数据数量102015年-2018年1587（二）票房预测算法多项式曲线拟合通过对斯格特苏凯的基于MAAP评级的电影票房预测模型学习，本文提出算

25、法：对历史票房数据进行多项式曲线拟合，建立一个票房走势的“模型”，再把现有的票房套进模型里做计算。多项式函数拟合是把给定数据是由M次多项式函数生成的作为一个假设，M次多项式函数并不是都会产生给定数据，这需要我们进行选择，应当选择的是一个不管是对已知数据还是未知数据都有较好预测能力的函数。最小二乘法是在数学上命名为曲线拟合，它寻找数据的最佳函数匹配是运用最小化误差的平方和，最小二乘法的优点是对于求出未知数据更加的方便，而且这些求得的数据与实际数据之间误差的平方和是最小的。最小二乘法对于曲线拟合的具体原理如下：假设训练数据集是： 是属于输入x的观测值，而则是相应的输出y的观测值，其中i=1,2,N

26、设M次的多项式是其中，x是单变量的输入，是M+1个参数。当损失函数（即最小二乘法）是平方函数时，系数的意义是为了使计算更加简便，把模型与训练数据代入可以得到：对wj求偏导并令其为0 以上公式最后一步存在一处错误：等式左边x指数为（j+k）必须对多项式系数进行拟合，解线性方程组，得到下面的求和符号上下限都是i=1到N,为了直观所以直接省略书写步骤。通过计算，得出：把上面的值带入线性方程组求解即可得出答案。将数据代入上述研究方程即为：将某一对比电影历史票房和预测票房电影的前期票房作为输入，通过图像显示处理，利用多项式曲线拟合与预测票房电影训练模型，最后预测出票房。具体代码如下：#多项式拟合def draw_fit(data): x = np.array(range(len(data) z = np.poly1d(np.polyf