计算机毕业设计PySpark+Scrapy农产品推荐系统 农产品爬虫 农产品商城 农产品大数据 农产品数据分析可视化 PySpark Hadoop
(1)能够根据计算机软硬件知识和数学知识给出复杂工程设计的基本思路和解决方案；在考虑社会、健康、安全、法律、文化以及环境等因素下可对设计方案及软硬件系统等在技术、经济等方面进行评价，确认其可行性；
(2)能够建立软硬件系统、应用数学、自然科学和工程科学的基本原理、通过信息综合来验证解决方案的准确性和合理性，获得有效结论；
(3)正确选择并能合理应用恰当的技术、工程工具与开发平台完成毕业设计课题的设计、开发、测试，保证所完成的系统在功能和性能上达到任务书规定的要求，具有较好的实用性；
(4)培养学生能够基于工程相关背景知识合理分析、评价计算机专业工程实践和复杂工程问题解决方案对经济、环境、法律、安全、健康、伦理的影响，并理解应承担的责任；
(5)能够在多学科背景下理解团队的意义，了解软件项目团队的角色，主动与其他成员沟通、合作、开展工作；能够在团队中承担个体、团队成员以及负责人的角色；
(6)能够就计算机领域复杂工程问题与行业及社会公众进行有效沟通和交流；能够就功能、技术等相关问题陈述发言、清晰表达；能够用形式化模型和规范的文档等形式呈现软件系统解决方案和成果；能够较正确回答开题答辩、最终答辩中教师提出的相关问题；
(7)理解工程实践活动中工程管理与经济决策基本知识，并能在多学科环境下应用于计算机工程实践中；
(8)具有独立分析和解决问题能力，提升自主学习和终身学习的意识。
毕业设计（论文）的内容和要求 ：
〔包括原始数据、技术要求、工作要求等〕
（1）毕业设计（论文）的内容
随着互联网技术的不断发展，电子商务平台在农产品销售领域扮演着越来越重要的角色。消费者对农产品的购买行为逐渐从线下转向线上，这使得农产品电商平台的用户数据呈现出爆炸式增长。如何有效利用这些数据，为用户提供个性化的农产品推荐，成为农产品电商平台亟待解决的问题。因此，本文提出了一种基于Spark协同过滤的农产品个性推荐系统，旨在利用Spark的分布式计算能力，提高推荐系统的计算效率和准确性。系统实现以下的内容：
1) 游客登陆功能
前台用户通过注册并登陆后进入系统，用户可以在个人中心修改基本信息，其包括收货人姓名、收货地址及联系电话，也可以修改密码等。具有较高的灵活性。
2) 商品展示、搜索功能
用户可以通过农产品关键词或农产品分类等条件筛选符合要求的农产品，也可以通过默认、价格、随便看看等排序条件对产品进行排序；在模块页面的右侧，系统会通过基于用户的协同过滤算法推荐用户5个农产品。
当用户浏览某个农产品的详情页面时，系统会展示农产品的标题、产品图片、价格、商家、类别、地区、产品参数以及产品详情介绍等基本信息，同时在页面的右侧，系统会通过基于物品的协同过滤算法推荐用户5个相关的农产品。
农产品商品展示功能还可以通过分类模块进行展示，后台可按照需求增加或减少商品分类，对商品进行归类有助于用户快速浏览、了解自己所需要的产品。
3) 购物车加购功能
当用户浏览某个农产品的详情页面时，用户可将其加入购物车，在购物车页面可以将所有农产品一并结算购买，当填写完收货人姓名、收货地址及联系电话等信息商品
4) 个人中心功能
在这个功能中要实现用户对自己的信息进行查看、修改，查看自己已发布信息等个人信息管理功能。
（2）原始数据以及技术要求
课题所需原始数据支撑均由个人从所需从官方网站收集，在本次课题中所需要使用到的开发工具，如PyCharm、MySQL数据库都是目前市面上较为流通的工具，可以从网上免费下载，使用非常方便。开发语言选用python，具有简洁、易读、易学的特点，被广泛应用于Web开发、数据分析、人工智能等领域。在此系统中，我们使用Python进行后端开发，利用其强大的语法特性和丰富的第三方库，实现了各个模块（如商品、用户、购物车等）的业务逻辑。对于系统前端的界面设计，我们采用Vue.js作为前端开发框架，通过其提供的功能，实现了整个系统的前端交互和视觉设计，例如商品展示、购物车管理等；使用Element Plus作为前端UI框架，利用其提供的组件，快速构建了购物车界面和登陆界面，并提升了系统的用户体验。而系统的后端，我们采用Django作为后端开发框架，通过其提供的功能，轻松实现了各个业务模块的开发和管理，例如商品、用户、购物车等。最后，使用Scrapy进行数据采集，例如从多个电商网站抓取商品信息，并存储到数据库中，以供系统进行商品推荐和展示。
（3）工作要求
本次课题需要掌握件的使用以及配置，还需要阅读大量的文献完善系统的功能，培养个人全面的分析问题。在调研分析方面，整体工程量足够，要求充分掌握资料，选择相关课题参考文献并进行归纳整理，完成前期的需求分析，阅读国内外相关文献以及报道，对目前国内外农产品市场现状、项目的完成意义进行分析，在理论分析基础上，力求更深层次的挖掘。程序设计方面，完成具有实际意义的系统，要实现系统的基本购物、沟通功能，设计界面简洁友好，呈现出自己想要的效果。认真的制定计划，按时按量按质的完成开题报告、翻译工作、对系统的优化设计、对输出结果的对比等工作。最后，撰写一万字以上毕业设计论文，制作PPT，完成系统演示和毕业答辩，上交相关材料。
毕业设计（论文）的成果要求 ：
〔包括图表、实物等硬件要求〕
(1)要求提交1份不少于4000汉字的书面开题报告（内容包括：课题的意义、文献的综述、方案的论证、设计的思路、工作计划等），并进行开题报告和填写毕业设计（论文）工作计划表；
(2)完成毕业设计课题的设计与软件开发，实现要求的所有功能；
(3)围绕设计的软件成果，撰写毕业设计(论文)报告，要求内容详实、格式规范、结构严谨、逻辑严密，字数不少于10000字，排版及打印格式需严格按照教务处关于毕业设计（论文）的相关规定；
(4)其他未尽事宜一律遵照学院和教务处的有关规定。
主要参考文献：
[1] 融合类目偏好和数据场聚类的协同过滤推荐算法研究[J]. 马鑫;王芳.现代情报,2023(01):1.
[2] 张勇, 周婕, 陆萍. 乡村振兴视阈下盘活利用农村闲置宅基地的理论与实践——基于安徽省两个案例的考察[J]. 农业经济问题, 2022(4):11.
[3] 协同过滤推荐系统综述[J]. 赵俊逸;庄福振;敖翔;何清;蒋慧琴;马岭.信息安全学报,2021(05):3.
[4] 乡村振兴战略背景下农村电商发展现状及策略探析[J]. 张长宝.山西农经,2021(18):13.
[5] “数商兴农”背景下电商平台对农产品上行的价格指导研究[J]. 徐良霞.全国流通经济,2023(23):7
[6] 农村电商高质量发展机遇、挑战及对策研究[J]. 郭凯凯;高启杰.现代经济探讨,2022(02)
[7] 电商模式下农产品销售策略转变与创新——《农产品电子商务与网购食品质量安全管理研究》评述[J]. 于美英.食品与机械,2021(11)
[8] 基于数字营销的农产品电商运营思考[J]. 付帆.经济师,2022(10)
[9] 农村电子商务发展现状的管理视角及对策分析[J]. 张骏.农村经济与科技,2022(18)
[10] 个性化推荐系统技术进展[J]. 刘君良;李晓光.计算机科学,2020(07)
[11] 乡村振兴背景下“数字农业”发展趋势与实践策略[J]. 胡青.中共杭州市委党校学报,2019(05)
[12] 基于近邻协同过滤算法的相似度计算方法研究[J]. 王博生;何先波;朱广林;郭军平;陶卫国;李丽.绵阳师范学院学报,2019(08)
基于大数据的电子商务个性化信息推荐服务模式研究[J]. 杨利.科技视界,2019(10).
