2022年4月22日下午，河北外国语学院计算机学院于东楼418举办活动开展“千锋实训python爬虫实训答辩”活动。王泽贤院长、刑泽欣院长、李静老师、齐波老师、周宁宁老师均参加此次活动。

互联网是个神奇的大网，大数据开发也是一种模式，大数据的类型大致可以分为三类传统企业数据包括：CRMsystem的消费者数据，传统的ERP数据，库存数据以及账目数据。机器和传感器数据：包括呼叫记录，智能仪表，工业设备传感器，设备日志（通常是Digitalexhaust），交易数据等。大数据分析的数据来源有很多种，包括公司或者机构的内部来源和外部来源，分为以下几类：（1）交易数据（2）移动通信数据（3）人为数据（4）机器和传感器数据（5）互联网上的“开放数据”来源，如政府机构非盈利组织和企业免费提供的数据。大数据采集概述分为：（1）互联网大数据与采集（2）python爬虫大数据采集技术的重要性（3）爬虫技术研究及应用现状（4）爬虫技术的应用场景（5）爬虫大数据采集的技术体系 （6）爬虫大数据采集与挖掘的合规性（7）爬虫大数据采集技术的展望。

随着计算机技术的不断发展，新的编程语言层出不穷，Python正是其中的佼佼者。相比较早期普及的高级语言Mava语言等，Python有看要加实用的模块和库，虽然牺牲了底点性，但却更加方便用于开发小型项目。此外，Html也已经被普遍用于网站前端，标记语言的特性结合CSS丰富了网页内容和形式。某种意义上也促进了更加人性化的电子商务系统的发展。本文的网络爬虫正式基于Python语言编写的，通过对Html抓取加工将数据可视化，以监测逐渐从线下转移到线上，并随着电子商务发展越发简单普遍难以追踪的非法野生动物贸易。首先对计算器语言的发展，尤其是Python和Html的优势、基础概念以及性能进行介绍。最后着重介绍可以实现检测网络上非法野生动物贸易的爬虫的设计和实现。程序主要包括三个模块: URL解析，Html抓取，本地输出。Python的开发环境和工具分别是OSX和PyChramCE，主要调用了Python中的Urllib2beautifulsoup模块。最终的程序可以实现对指定网站，指定关键词抓取指定内容，保存内容到本地，以便于追踪和检测。为迎接本次大赛，学院领导给予了大力支持此次答辩活动的开展，不仅开拓了同学们的视野,丰富了学习的文化内涵,也让同学们更好更深的了解和熟悉python爬虫的相关知识。锻炼了同学们的实践操作技能和创新能力，并加强了同学语言表达和沟通的能力，为拓展综合素质提供了良好的机会。

本次答辩意在提高同学们的专业技能，锻炼综合应用的能力。活动过程中千峰的老师耐心询问教导，知无不答，现场非常融洽，王院长和刑院长等一众老师在现场也为学生提建议出主意，共同解答遇到的难题，本次活动学生们学到的不只有知识，还有团队的重要性，每组人员都通力合作，共同进步！

希望通过本次实训，同学们能清楚认识到自己在学习上面的不足，加以时日改正，实训只是我们人生路上的一个点，日后要面对诸多困难，我们也将在困难中成长，在风雨中奔跑，不断认识新的自己，成就每一个自我。