未通过先自我介绍，然后根据简历问，mysql得索引，引擎，redis用过吗？spark得底层了解吗？不用hive怎么去重？
包含1个问题，1个回答
Q：两个文件中都用10亿条url，怎么去重，用代码实现。
面试经历
2条面经
“有难度”
“体验很好”
内容索引
优秀公司
推荐公司
友情链接
最新公司
相似公司
宿州市埇桥区祁县丁盼盼服装店桥西区熙妍日用百货商行江苏丰海新能源工程技术有限公司南京分公司延吉珈悦商贸有限公司城关区老川刀熟食店（个体工商户）奉天万穗肥业（沈阳）有限公司东胜区波子手机销售中心（个体工商户）高平市小李手机店（个体工商户）即墨区李氏鸿运炸串店（个体工商户）珠海市香洲区清福日用品微店（个体工商户）天柱县鱼生有你水产店（个体工商户）祁县晋泽新能源有限公司贵池区百老泉白酒商行（个体工商户）襄阳市怠补工艺品铺（个人独资）温江区文武罗晓兰烧麦小吃店（个体工商户）上海郑勇骑建筑工程有限公司盐山瑞潼养殖场洛阳市涧西区佰车汇汽车服务店（个体工商户）开封市欣君芊百货商行（个人独资）西安市灞桥区见之念之茶饮咖啡馆（个体工商户）扶余市安丽娜运输户（个体工商户）