探索人工智能应用场景!

标签:底层数据

底层数据

大数据(十五) – JStorm

<span class='yzk_title_148'>大数据(十五) – JStorm</span>
JStorm 是一个分布式实时计算引擎,是淘宝开源的 随着Storm 的规模越来越大,发现原有的很多Storm设计,只能适合小集群中运行,当集群规模超过100台时,均会出现一些或这或那的问题。JStorm 比Storm更稳定,更强大,更快, Storm上跑的程序,一行代码不变可以...

admin 2年前 (2018-02-11) 16℃ 0评论 0喜欢

人工智能

大数据(十四) – Storm

<span class='yzk_title_144'>大数据(十四) – Storm</span>
storm是一个分布式实时计算引擎 storm/Jstorm的安装、配置、启动几乎一模一样 storm是twitter开源的 storm的特点 storm支持热部署,即时上限或下线app 可以在storm上使用各种编程语言如clojure、java、ruby、python...

admin 2年前 (2018-02-11) 16℃ 0评论 1喜欢

底层数据

大数据(十三) – Azkaban

<span class='yzk_title_139'>大数据(十三) – Azkaban</span>
Azkaban基本架构 Azkaban使用方式         REST API         WEB UI                 用户权限管理                 提交作业流                 查看作业流运行进度 Azkaban作业流...

admin 2年前 (2018-02-11) 16℃ 0评论 0喜欢

底层数据

大数据(十二) – Oozie

<span class='yzk_title_136'>大数据(十二) – Oozie</span>
基本概念     目前计算框架和作业类型繁多:         MapReduce Java、Streaming、HQL、Pig等     如何对这些框架和作业进行统一管理和调度:         不同作业之间存在依赖关系(DAG);         周期性作业         ...

admin 2年前 (2018-02-11) 16℃ 0评论 0喜欢

底层数据

大数据(十一) – Mahout

<span class='yzk_title_130'>大数据(十一) – Mahout</span>
传统数据挖掘/机器学习库存在的问题         缺少一个活跃的技术社区         扩展性差         文档化差,缺少实例         不开源,商业化库         通常由研究机构开发         实施性差 Apache Mahout优点       ...

admin 2年前 (2018-02-11) 18℃ 0评论 0喜欢

底层数据

大数据(十) – Pig

<span class='yzk_title_126'>大数据(十) – Pig</span>
Pig是什么         Hadoop上的数据流执行引擎(由Yahoo!开源)                 利用HDFS存储数据                 利用MapReduce处理数据         使用Pig Latin语言表达数据流            ...

admin 2年前 (2018-02-11) 18℃ 0评论 1喜欢

底层数据

大数据(九) – Hive

<span class='yzk_title_121'>大数据(九) – Hive</span>
构建在Hadoop之上的数据仓库,数据计算使用MR,数据存储使用HDFS         因为数据计算使用mapreduce,因此通常用于进行离线数据处理 Hive 定义了一种类 SQL 查询语言——HQL         类似SQL,但不完全相同 可认为是一个HQL&#...

admin 2年前 (2018-02-11) 19℃ 0评论 0喜欢

人工智能

大数据(八) – Sqoop

<span class='yzk_title_117'>大数据(八) – Sqoop</span>
Sqoop是什么         Sqoop:SQL-to-Hadoop         连接 传统关系型数据库 和 Hadoop 的桥梁                 把关系型数据库的数据导入到 Hadoop 系统 ( 如 HDFS HBase 和 Hive) 中;    ...

admin 2年前 (2018-02-11) 15℃ 0评论 0喜欢