用PYTHON3 做网站,网页传奇怎么制作,个人主页格式,做网站得叫什么软件腾讯面试题学长11#xff09;笔试部分#xff08;1#xff09;有一表名t_sh_mtt_netdisk_log#xff0c;从表名可以看出该表是什么业务的#xff0c;是什么周期粒度的表。#xff08;2#xff09;怎么查看表结构#xff0c;表创建语句#xff1f;怎么查看表有哪些分区…腾讯面试题学长11笔试部分1有一表名t_sh_mtt_netdisk_log从表名可以看出该表是什么业务的是什么周期粒度的表。2怎么查看表结构表创建语句怎么查看表有哪些分区怎么查看分区对应hdfs路径怎么计算某个分区的数据量大小怎么计算某个分区的文件总数3有一hive sql怎么计算这个sql会产生多少个map数4怎么查看hive有什么自带函数怎么查看函数的详细信息5Hive支持哪些基本数据类型6请指出下面两个语句读取分区ds数据的不同Select * from t where ds20150101 and provincegd or provinceexSelect x fromt where ds 20150101 andprovincegd or provinceex7将字符串keylvaluelkey2value2...keynvaluen进行分割放到一个字段里面可以查出任意一个keyx对应的valuex值。请写出查询语句并计算总共有多少个key值。8用一个字符串比如alblc来测试某个函数比如split用|分隔符将字符串进行分割的语句9a表和b表内连接a表为小表只有2000行记录select a.*from a Join b on a.keyb.key可以进行怎样的优化10a表left join b表b表为小衣可以进行怎样优化scleet a.*from a left join Join b ona.keyb.key如果a为小表可以怎样优化11请指出下面sql语句的区别select a.* from a left Join b on a.key b.key and a.dsxxx and b.dsxxxsclect a.* from a lef Join b on a.key b.key and b.dsxxxselect a.* from a lef Join b on a.key b.key and b.dsxxx where a.dsxxxSelect a.* from a left Join b on a.key b.key where a.dsxxx and b.dsxxx12多表连按的写法a,.b,c三个表内连接连接字段都是key怎样写连接语句13两大表连接发生了数据倾斜有几个reduce无法完成怎么查找发生数据倾斜的原因应该怎样优化语句select t1.*,nvl(t2.x,1) from t1 left join t2 on t1.guidt2.guid14两大表连接发生了数据倾斜。有一个reduce无法完成检直发现t1中guid的记录有很多其他guid都不重复这条语句该怎样优化语句select t1.*,nvl(t2.x,1) from t1 left join t2 on t1.guid t2.guid15如何用hive q实现sqL中的exist/in 子句mysql语句如下SEL ECT a* FROM a where a.key inselect dstinct key from b where key like ‘filter%’16sort by、distribute by、cluster by 和 order by 区别注可参考数据工厂的“帮助中心》集群hive》hive使用优化》hive使用注意事项”学长21笔试题用HiveSQL实现1全量用户登员日志表t_login_all字段信息ftime登录日期、openid登录帐号新增用户登录日志表t_login_new字段信息ftime登录日期、openid登录帐号求每天新增用户次日、7天、30天留存率。说明7天留存是指当天有登录且第7天还登录的用户2消息流水表t_chat all字段信息Ftime日期、send_user id发消息用户id、receive.user id接收消息用户id、chat id消息id、send.time发消息时间用户登录流水日志表t_login_all字段信息Ftime日期、user_id用户id、login_id登录id、login_loc登录区服、login_time登录时间求每天有收发消息用户最近登录时间、登录区服输出ftimeuser_idlogin_loclogin_time用Spark core实现写Scala脚本1、reduceByKey()、groupByKey()有什么区别2、DataFrame和RDD有什么区别3、使用累加器对数组Array(1,2,3,4)每个元素实现累加操作最后打印输出求和结果。4、现有文件file.txt文件格式如下Order_iduser_idpaymentproductid1、1768501552、12186002113、22397882424、31012885995、4899252306、2311890981。。。。。。求Top10个payment字段的值学长31技术部分1我看你上面写了你会Spark那你用Spark写一下刚刚那道题的代码第6题不能用Spark SQL2我看你上面有写到熟悉Hive原理和优化你说一下怎么优化3优化有说到语句优化然后又说回到pv和uv那个问题假如说让你优化你怎么优化我代码里面有count(distinct id) uv,4问了一些Kafka的我只记得一点点问我数据会不会重复消费什么情况下会重复消费5在Hive执行语句的时候如果很慢什么原因造成我有提到数据倾斜的问题他又问怎么解决数据倾斜2项目部分1让你挑一个比较有亮点的项目详细说2你负责了什么数仓中统计了哪些指标3刚刚听你说项目里面有提到分层如果我要你求每天商品的pvuv从ods层到dm层它的具体流向各层都统计了什么后来让写求pvuv的sql语句3场景部分1有一个分区表表名T字段qqage按天分区让写出创建表的语句2刚刚的分区表求20200221这个分区中年龄第N大的qq号列表3有一个表两个字段分别是qqa和qqb数据如下12,3412,5612,7834,5634,12找出所有互相关注的qq对4手写部分1三个字段timestampuser_idproduct_id让求pv最大的商品写了之后又叫用Scala代码写一遍然后又问假如说只让你求pv数大于100的top3呢代码又怎么写学长41技术部分1你们数仓用什么建模方法说出常见的建模方法2维度建模有什么好处 为什么选择这个比如最后业务需求要增加一个维度我们需要做什么工作3怎么判断一个需求能不能实现你们的判断标准是什么需求变更要做什么4增加一个维度后发现查询的速度变得非常慢是什么原因导致的5你们ADS层的数据量每天的数据量有多大ADS层在MySQL中的表是怎么创建的有什么注意事项索引怎么创建的6你知道Spark的宽窄依赖吗 有没有把宽依赖转化为窄依赖的例子7Spark参数调优做了些什么 2算法部分1一个list [1,5,5,7,9] 去重并计算时间空间复杂度2单链表的反转文章来源尚硅谷大数据培训
