学员试听 >
机构入驻 >
试听课程申请
看不清,请点击刷新
立即申请
机构入驻申请
看不清,请点击刷新
立即申请
试听课程申请
看不清,请点击刷新
立即申请
机构入驻申请
看不清,请点击刷新
立即申请
课程分类
寻客吧 > 教育新闻 > 电脑培训 >  什么是大数据开发

什么是大数据开发

时间:2025-07-04 14:06:49  编辑:北京优就业IT培训学院  来源:寻客吧  浏览:184次   【】【】【
什么不是大数据开发?
    仅使用数据库(关系型mysql,sqlserver,oracle等非关系型mongoredis等),尽管数据量达到别,亿级别不是大数据开发。
    从业务系统的数据库中查询数据然后产出报表不是大数据开发。
    端上(页面,h5,手机native)埋点上报数据记录到数据库中不是大数据开发。
    什么是大数据开发?
    1.大数据开发需要的技能
    到智联上搜了一下大数据开发工程师这个职位,随便点了几个职位,截图如下:

    所以说,现在互联网公司所指的大数据开发用到的工具是:hadoop,hive,hbase,spark,kafka等。


    2.大数据开发做的事情
    精简到一个词语就是:统计
    精简到两类指标就是:PV和UV
    精简到一句话就是:统计各种指标的PV和UV
    PC互联网时代,各门户网站(比如:新浪,网易,搜狐)关注的是各自网站今天被打开了几次(pv),今天有多少人(uv)访问了网站。更复杂一点的比如:
    页面上某个按钮或者某个连接有多少人点击了几次
    某个页面上的热力图(点击地方越多,图上颜色越重)
    移动互联网时代,手机应用被用户打开的次数和人数也是大家关注的重点,但是除此之外还多出了许多其他非常重要的数据,由于手机屏幕的限制,信息流成为了移动时代的主流。
    各大门户网站非常关注自己的新闻客户端中:在信息流中曝光了多少篇文章,其中有多少篇文章被用户点击了。每篇文章阅读了长时间,因为用户点击的文章越多,使用客户端的时间越长,各公司的广告收入才越高,所以各公司想方设法推荐用户喜欢的内容。