专注细节
努力进步

标签:Spark

Spark

Spark Streaming 尝试

burness阅读(1816)评论(0)

Spark Streaming简介 何为streaming?在实际中,有一类数据是连续性生产,流式方法主要就是为了解决这块的问题,将连续性数据切分离散型单元来进行处理的方法。生活中比较熟悉的是视频或者音频的流式服务就是将连续性的数据分为一个 […]

Spark

Spark SQL尝试

burness阅读(1322)评论(0)

简介 Spark SQL最早合并Shark,一个尝试将Hive跑在Spark上的project。Hive是Hadoop生态圈的一个重要组成部分,内部主要是讲SQL转换为MapReduce Job。 Shark将其中的MR部分用Spark改写 […]

机器学习

如何牛逼地设计电影推荐系统

burness阅读(1963)评论(0)

个性化 所谓个性化就是系统在对每个用户进行相关引导时,应该考虑改用户的特点,比如他的历史搜索行为中表现出来的特点,比如是喜欢科幻、或者喜欢文艺,在搜索相关内容时,可以根据这些潜在模式去调整内容的顺序。 精准营销和消费者分群 精准营销是通过用 […]