首页 > 代码库 > 大数据的本质

大数据的本质

数据来源?

  购买(政府、阿里巴巴、数据交易所)

  爬虫

  数据采集(机器人、无人驾驶、人工智慧)

  获得的是原始数据

什么是数据清洗?

  按照需求分析,过滤出有效的完整的数据,放入数据仓库

  etc 数据清洗转换

有哪些应用?

  商品、 新闻推荐   信贷、个人信用   婚姻(珍爱网) 舆论检测平台 医疗(全民健康档案) 交通(推荐路线,路况情况,)  气象(彩云天气) 时空

  本质上是这些应用,都是去学习大数据模型,这就是所谓的机器学习

什么是大数据模型?

   模型主要包括 业务 算法

   解决问题:使用数据干什么?

        职位分为 大数据开发工程师 大数据算法 大数据科学家

机器学习的架构图是什么?

  文本数据 _接受数据_ >

大数据分析职业需要哪些技能?

  1. 一门语言基础

  2. Linux

  3.

主要现在技术难点?

  1. 5G通信(数据传输机制)

  2. 物联操作系统(大数据支撑平台)

自由职业会成为将来趋势?

  猪八戒网、项目大厅

网络编程发展模式?

  c/s(游戏)

  B/s

大数据的本质