JAVA 大数据框架 第2页

JAVA和大数据的关系是什么?（java和大数据的关系是什么样的）

　　JAVA和大数据的关系是什么？　　答：大数据技术相关的有大数据开发，数据分析，数据挖掘，大数据运维等几个岗位，做其中的大数据开发岗位，需要学习JAVA。JAVA是一种编程语言，可以说一种工具，大数据岗位需要掌握JAVA编程语言以及hadoop和spark框架。...

Nginx服务器高性能优化的配置--轻松实现10万并发访问量

今天要说的是Nginx服务器高性能优化的配置，如何使Nginx轻松实现10万并发访问量。通常来说，一个正常的NginxLinux服务器可以达到500,000–600,000次/秒的请求处理性能，如果Nginx服务器经过优化的话，则可以稳定地达到904,000次/秒的处理性能，大...

SpringBoot整合oceanbase，实现oracle无缝切换到oceanbase

前言??随着去“IOE”化的潮流，近些年来，许多与国家相关的项目不约而同地往”国产化“方向靠拢，不可避免地，一些项目可能需要进行数据库迁移。??Oceanbase作为蚂蚁集团完全自主研发的国产原生分布式数据库，在TPC-C核TPC-H的测试上有过刷新世界纪录的辉煌成就，已连续9年稳定支撑双11...

3000人群被字节内部技术图谱炸翻了，惊艳级实用

前几天晚上群里的消息炸翻了，我以为发生啥大事了。一看，一字节老哥秀了一把他们老大给组里配的技术图谱手册！大家都求着来1套，我认真看了，基本覆盖了所有Java技术栈以及架构设计的方方面面。确实很少见，够实在够精华，这套东西要是拿出去卖，少说也得一二百！我也求了一份，但想着不能自己一个人香，在这里分享出...

共2400页!又一个Java面试神器上线了

大家好，最近有不少小伙伴在后台留言，近期的面试越来越难了，要背的八股文越来越多了，考察得越来越细，越来越底层，明摆着就是想让我们徒手造航母嘛！实在是太为难我们这些程序员了。这不，为了帮大家节约时间，给大家搞来了今年上半年碰到的大厂Java面试题合集，内容非常的全面。一般技术面试官都会通过自己的方式去...

HashMap底层原理及jdk1.8源码解读

一、前言写在前面：小编码字收集资料花了一天的时间整理出来，对你有帮助一键三连走一波哈，谢谢啦！！HashMap在我们日常开发中可谓经常遇到，HashMap源码和底层原理在现在面试中是必问的。所以我们要掌握一下，也是作为两年开发经验必备的知识点！HashMap基于Map接口实现，元素以<Key...

大数据之分析系统框架要求（大数据分析系统架构）

一、分析系统框架总体要求主要从以下4个方面对大数据分析系统的基本功能做出要求：a)数据准备模块的功能要求：对原始数据进行预处理，使数据能被上层分析方法直接使用；b)分析支撑模块的功能要求：提供建立数据模型和应用模型的算法库或者工具库；c)数据分析模块的功能要求：提供数据分析方法或者中间件，将数...

以字节跳动内部 Data Catalog 架构升级为例聊业务系统的性能优化

背景字节跳动DataCatalog产品早期，是基于LinkedInWherehows进行二次改造，产品早期只支持Hive一种数据源。后续为了支持业务发展，做了很多修修补补的工作，系统的可维护性和扩展性变得不可忍受。比如为了支持数据血缘能力，引入了字节内部的图数据库veGraph，写...

为什么阿里巴巴禁止数据库中做多表join?

阿里出过一个《Java开发手册》，上面有一条规约是禁止超过三张表的join。而实际操作过程中，我们平时确实在SQL中写JOIN也比较少，两张表JOIN有的时候也有，多张表的JOIN在离线数据分析的时候很多，但是在线系统确实很少。经常有人问我为什么？其实最主要的原因就是join的效率比较低。MySQL...

ThreadLocal 源码全详解(ThreadLocalMap)

1.ThreadLocal源码分析1.1ThreadLocal原理首先我们得从Thread类讲起，在Thread类中有维护两个ThreadLocal.ThreadLocalMap对象（初始为null，只有在调用ThreadLocal类的set或get时才创建它们）：...