海汼部落
  • 首页
  • 课程
  • 实战
  • 云平台
  • 部落
  • 公告
  • 分享
  • 问答
    登 录 注册
创始人

青牛

第 12 位会员

447 关注者
2249 评论
308 话题

  • WeChat
  • Website
  • 公司
  • 城市
  • Ta 发布的话题
  • Ta 发表的回复
  • Ta 关注的用户
  • Ta 赞过的话题
  1. 个人中心
  2. Ta 发表的回复(2249)
  • 信息被删除或无权限查看
  • 信息被删除或无权限查看
  • 信息被删除或无权限查看
  • 信息被删除或无权限查看
  • 信息被删除或无权限查看
  • 如何配置 hue 的 Web ui 用 https 协议访问,还有 50070 等端口对应的 Web ui 的访问用 https 协议访问?

    @歌唱祖国 :+1: 但是 感觉这个太不安全了

  • spark shuffle 在原始的 Hash Shuffle 机制中怎么生存 bucket?

    @shishuai19910217 我理解错了 我以为你说的是读取数据那个numPartition,write这个action操作可以指定partition数量,这个数量会决定reduce的数量从而影响bucket的数量

  • spark shuffle 在原始的 Hash Shuffle 机制中怎么生存 bucket?

    Mapper会根据Reducer的数量创建出相应的bucket,bucket的数量是M×R,其中M是Map的个数,R是Reduce的个数,并不是按照numPartition计算的

  • 如何配置 hue 的 Web ui 用 https 协议访问,还有 50070 等端口对应的 Web ui 的访问用 https 协议访问?

    企业中不会吧hue地址暴露在公网上的 一般是员工在非公司网络下先连接vpn登入公司内网 再访问hue

  • hive 嵌套查询问题?

    @sparksun007 Select a.month,a.day,sum(a.pv)/count(a.) from (Select month,day, remote_addr,count(1) as pv from ods_weblog_detail group by remote_addr,month,day) as a group by a.month,a.day

  • hive 嵌套查询问题?

    用sum或是count这种聚合函数最后一定跟group by

  • Spark2.x 之 SparkSql 读取 MySQL 数据中 Decimal 类型如何读取?

    XXX.map(scala.math.BigDecimal(_))

  • 搭建完集群如何单元练习?

    现在单机模式下写程序,然后在集群上用spark-submit方式运行

  • Java 调用 mvn 报错?

    mvn -v命令执行报错吗

  • hive 怎样批量创建表?

    @shishuai19910217 自己实现一个exeBatch吧

  • «
  • 1
  • 2
  • ...
  • 102
  • 103
  • 104
  • 105
  • 106
  • 107
  • 108
  • ...
  • 145
  • 146
  • »

为技术学习者提供一个动手实战、分享创造、结识伙伴、协同互助的平台。    

  京公网安备 11011402010672号        京ICP备17041118号-2