掌握hadoop大数据的基本技术，熟悉使用pyspark技术，学会编写spark RDD程序，学会使用DataFrame，学会使用spark Sql 语句，学会利用spark读取 MySQL 数据库的数据，学会利用 jieba分词框架，学会使用python网络爬虫框架，学会使用pyecharts数据可视化技术，掌握python web框架 ...

本系统是一个基于Flask构建的新闻大数据分析平台，集成了数据采集、存储、清洗、分析和可视化功能。系统提供实时新闻热点分析、情感分析、事件时间线追踪等功能，并支持多角色用户权限管理。