编程语言 | 数盟
20181029040854597 0

Spark 踩坑记—Spark Streaming+Kafka

- 文章,基础架构,编程语言 - 阅 173

作者:肖力涛 前言 在 WeTest 舆情项目中,需要对每天千万级的游戏评论信息进行词频统计,在生产者一端,我们将数据按照每天的拉取时间存入了Kafka当中,而在消费者一端,我们利用了 spark streaming 从 kafka 中不断拉取数据进行词频统计。本文首先对 spark streaming 嵌入 …

t011d211b27f68666ba 0

教你用几行Python和消费数据做客户细分

- 文章,数据分析,编程语言,数据挖掘 - 阅 160

编译:张秋玥、罗然、云舟 细分客户群是向客户提供个性化体验的关键。它可以提供关于客户行为、习惯与偏好的相关信息,帮助企业提供量身定制的营销活动从而改善客户体验。在业界人们往往把他吹嘘成提高收入的万能药,但实际上这个操作并不复杂,本文就将带你用简单的代码实现…

0

Spark灰度发布在十万级节点上的实践

- 文章,基础架构,编程语言 - 阅 120

本文介绍了顶级互联网公司数万节点下 Spark 的 CI 与 CD & CD 灰度发布实践。包含如何维护源代码,如何维护 Release 多版本,开发版与正式版,以及如何实现灰度发布,如何进行 hotfix 等。为了提高本文内容的可借鉴性,隐去了公司特有内容,只保留通用部分。 CI 介绍 持续…

0537aea4c28648b47529584ffc28e104 0

visdom的安装及在pytorch下损失函数的可视化应用

- 文章,编程语言,深度学习 - 阅 248

2018/9/18更新  感觉tensorboardX插件更好用,已转用https://github.com/lanpa/tensorboardX 更新:新版visdom0.1.7安装方式为:conda install -c srivasv visdom pytorch下可采用visidom作为可视化工具 1. 安装 pip install visdom conda install visdom 启动 …

t011d211b27f68666ba 0

AI社区有多排外?「外行人」观点引发争议

- 文章,编程语言,人工智能 - 阅 526

人工智能近年来发展迅猛,也引起了很多其它领域研究者的关注。越来越多有关 AI+传统领域的研究正出现在 Nature、Cell 等重要期刊上。然而隔行如隔山,对于其它行业的人们来说,AI 研究社区似乎并不如看起来那么友好。 近日,蒙特利尔 Jewish General Hospital 的生物统计学家 Al…

20140726154658625 0

蓝牙核心技术概述(一):蓝牙概述

- 文章,基础架构,编程语言,数据挖掘,深度学习 - 阅 506

关键词:蓝牙 核心技术 协议 版本 历史 作者:xubin341719(欢迎转载,请注明作者,请尊重版权,谢谢) 欢迎指正错误,共同学习、共同进步!! 下载连接:Bluetooth PROFILE SPECIFICATIONS (基本涵盖所有蓝牙协议)、buletooth core 2.1-4.0 SPECIFICATION(三蓝牙版本的…

22 0

如何实践AI深度学习的十大惊艳案例

- 文章,编程语言,人工智能,深度学习 - 阅 526

你可能已经听说过深度学习并认为它是骇人的数据科学里的一个领域。怎么可能让机器像人类一样学习呢?再者,对于某些人而言,更为骇人的是,我们为什么要让机器展现出类人的行为?这里,请看深度学习在实际应用中的十大案例,以便将其潜能视觉化。 深度学习是什么? 机器学习和深…

145202791495850396 0

在未来,物联网系统中的无故障数据存储

- 文章,基础架构,编程语言 - 阅 448

几十年来,远程控制节点的基本架构都是由控制器、传感器、本地存储器、网络连接接口和电池组成。这一架构广泛应用于实际操作所控制的系统中。在工业自动化系统中,控制器以不同速率监控多个传感器,将已标记时间的传感器数据保存在本地或扩展存储器内,然后通过ProfiBus等工业标…