logo 智能机器人开发者大赛社区

智能机器人开发者大赛社区
首页2025 Robo Mind 冬令营资料中心讨论广场精彩内容
去全站搜索看看?
赛队注册

登录社区云

登录社区云,与社区用户共同成长

智能机器人开发者大赛社区

邀请您加入社区

欢迎加入社区

欢迎加入社区

hdfs
  • Flink-Hadoop实战项目

    摘要:本项目构建了一个基于Apache Flink的铁路票务数据处理平台,实现HDFS文件到Hive数据仓库的实时转换。系统包含两个核心作业:1)文件处理作业定时扫描HDFS目录,解析票务和乘客信息文件并写入Parquet格式的Hive表;2)数据合并作业每小时关联两张源表生成完整车次信息。技术栈采用Flink 1.18.1流处理引擎,结合Kerberos认证保障安全,Quartz实现调度管理。系

    HMXMRY
    2025-07-22 10:35:46
     1931 
     67 
    #hadoop#hdfs#flink
没有更多了
回到
顶部
logo 提供社区服务与技术支持
logo 提供社区服务与技术支持
©1999-2023北京创新乐知网络技术有限公司 京ICP备19004658号