大数据 流处理和批处理讲解、主流框架对比、流批一体架构 流处理和批处理都是常用的数据处理方式,它们各有优劣。流处理通常用于需要实时响应的场景,如在线监控和警报系统等。而批处理则通常用于离线数据分析和挖掘等大规模数据处理场景。选择合适的处理方式取决于具体的业务需求和数据处理场景。 2023-04-23 浏览(2,482) 评论(2) 阅读全文
大数据 Hadoop中NameNode无法与slave的DataNode通讯 # ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: Initialization failed for Block pool BP-xxxx # Hadoop分布式集群无法启动slave2的datanode 2020-06-24 浏览(2,012) 评论(0) 阅读全文
大数据 Hive启动报错Relative path in absolute URI: xxx Hive启动报错Exception in thread "main" java.lang.IllegalArgumentException: java.net.URISyntaxException: Relative path in absolute URI: ${system:java.io.tmpdir%7D/$%7Bsystem:user.name%7D 2019-11-28 浏览(3,258) 评论(0) 阅读全文
大数据 初始化Hive仓库报错 初始化Hive仓库报错Exception in thread "main" java.lang.NoSuchMethodError: com.google.common.base.Preconditions.checkArgument(ZLjava/lang/String;Ljava/lang/Object;)V 2019-11-28 浏览(2,940) 评论(0) 阅读全文