上海的亿沓科技2024面经

#软件开发2024笔面经# 0)项目中遇到哪些问题?1)业务数据采集框架选择(FlinkCDC，Maxwell,Canal)2)Dwd 层新老访客修复、Dws层用户回流状态过大，选择状态后端不合理导致OOM3)状态后端选择 RocksDB导致链路延迟过高4)Dws层读取外部数据库维度数据网络延迟过高导致反压5)数据倾斜导致的反压6)Flink SQL 未设置 TTL 导致的 OOM7)改变程序拓扑结构，通过Savepoint恢复程序未指定算子Uid 导致的报错8)Kafka 分区动态增加，Flink键控不到新分区数据导致数据丢失9)某个Kafka分区没有数据，导致 Flink下游水位线无法抬升，窗口无法关闭计算10) Kafka的问题(挂了、丢了、重复了、积压了、乱序了、如何提高吞吐量)11) Hbase 的rowkey设计不合理导致的数据热点问题12) Redis做旁路缓存，与Hbase的数据一致性问题13) Flink写Clickhouse的精准一次性问题14) Clickhouse 的优化问题 #大数据#  #数据人的面试交流地#  #offer#

一面 60min1、自我介绍2、两两翻转链表中的节点（ACM）3、复杂链表的复制（讨论思路，引导式，不需要手撕）4、问题3中使用Map的O(n)空间复杂度算法和另一种O(1)的空间复杂度的算法，两者的使用内存差距大吗？（当时不太理解‘大’相对什么来说，然后直接往Map的底层数据结构说以及扩容机制）5、HashMap经典八股6、了解的排序算法，归并为什么稳定，快排为什么不稳定7、堆排序知道吗8、一道代码题，输出什么 public class main { protected static void changeBlooean(Boolean B){ B = tru...

#软件开发2024笔面经# 1说说你对数仓里分层的理解，越详细越好？2说说你对数仓里数据建模的认知理解，越详细越好？3之前做过数仓么？4请简要说明什么是数据仓库，以及它与数据库的主要区别。5列举几种常见的数据抽取、转换和加载（ETL）工具，并简述其特点。6如何处理数据中的缺失值？请举例说明至少两种方法。7讲一讲你对分布式数据处理框架（如 Hadoop、Spark 等）的理解。8在大数据环境下，如何保证数据的一致性和准确性？9描述一个你参与过的数据开发项目，包括遇到的挑战和解决方案。10如何优化 SQL 查询以提高性能？11数据分区有哪些常见的方式和好处？12解释一下数据清洗的主要流程和步骤。13什么是数据建模？请说明几种常见的数据模型。14如何处理海量数据的实时处理需求？15谈谈你对数据治理的理解和重要性。 #大数据#

面试内容分为以下几个部分（时长：一小时 5分钟）：1.自我介绍。2.出了一道算法题，将二叉树搜索树转换为双向链表，不新建链表结构，链表结构使用树节点的结构，左孩子代表前节点，右孩子代表后继节点。要求是在不新建节点的情况下实现转换。使用中序遍历解答了。3.做完算法题目之后出了一道 SQL 题，为薪资表格中获奖人员的薪水字段加 10% 的工资，获奖人员由获奖表格可以查询得到。当时有点理解错误了，写成了查询语句，后面面试官提醒了一下要用 update 语句，由于最近练的都是查询语句的语法，update 的语法没想起来。面试官把代码写了出来，就一行代码。4.然后对着简历问了几个问题，操作系统进程与线程...