那些虐哭过你的大学数学课都有什么用处?看完后恍然大悟! - CSDN博客
导读:高等数学有什么用?很多人都在问这个问题。其实大多数人在问这个问题的时候,心里已经预设了否定的答案。确实,对于大多数人来说,已经发展到了连数字都基本很少用了的一些高等数学分支,是过于虚无飘渺了。...
View Article中国移动业务支撑系统简介(BOSS、BASS、BOMC、4A及VGOP)_李晓杰的博客
文章目录移动BOSS系统移动BASS系统移动BOMC系统4A系统VGOP系统业务支撑系统(Business Support...
View Article如何使用TensorFlow mobile部署模型到移动设备 - CSDN博客
截止到今年,已经有超过 20 亿活跃的安卓设备。安卓手机的迅速普及很大程度上是因为各式各样的智能 app,从地图到图片编辑器应有尽有。随着深度学习的出现,我们的手机 app 将变得更加智能。下一代由深度学习驱动的手机 app 将可以学习并为你定制功能。一个很显著的例子是「Microsoft Swiftkey」,这是一个键盘 app, 能通过学习你常用的单词和词组来帮助你快速打字。...
View ArticleOracle - Spool导出数据到TXT文件 - CSDN博客
【1】Spoolspool的作用可以用一句话来描述:在sqlplus中用来保存或打印查询结果。即,可以将sql查询的结果保存问文件。spool常用的设置set colsep','; //域(列)输出分隔符 set echo off; //不显示start启动的脚本中的每个sql命令,缺省为on set feedback off; //不回显本次sql命令处理的记录条数,缺省为on...
View ArticleH5视频直播扫盲 | 吕小鸣前端博客
视频直播这么火,再不学就out了。为了紧跟潮流,本文将向大家介绍一下视频直播中的基本流程和主要的技术点,包括但不限于前端技术。1 H5到底能不能做视频直播?当然可以, H5火了这么久,涵盖了各个方面的技术。 对于视频录制,可以使用强大的webRTC(Web Real-Time...
View Article异地多活(异地双活)实践经验 - CSDN博客
异地多活(异地双活)是最近业界讨论比较多的话题,特别是前一阵子支付宝机房光纤故障和携程网数据库丢失之后,更加唤起了技术人员们对异地容灾的考虑。 而异地多活比异地容灾更高一级,因为异地容灾仅仅是一个冷备的概念,而异地多活却是指有两个或者多个可以同时对外服务的节点,任意一个点挂了,也可以迅速切换到其他节点对外服务,节点之间的数据做到准实时同步。 网上看了很多技术分享,总结了以下实践经验: 1...
View ArticleKafka MirrorMaker实践 - (a != b) ? b : a - ITeye博客
最近准备使用Kafka Mirrormaker做两个数据中心的数据同步,以下是一些要点: mirrormaker必须提供一个或多个consumer配置,一个producer配置,一个whitelist或一个blacklist(支持java正则表达式)启动多个mirrormaker进程,单个进程启动多个consuemr streams,...
View ArticleKafka跨集群迁移方案MirrorMaker原理、使用以及性能调优实践 - CSDN博客
序言Kakfa MirrorMaker是Kafka 官方提供的跨数据中心的流数据同步方案。其实现原理,其实就是通过从Source Cluster消费消息然后将消息生产到Target Cluster,即普通的消息生产和消费。用户只要通过简单的consumer配置和producer配置,然后启动Mirror,就可以实现准实时的数据同步。1. Kafka MirrorMaker基本特性Kafka...
View ArticleKafka系列之-Kafka监控工具KafkaOffsetMonitor配置及使用 - CSDN博客
KafkaOffsetMonitor是一个可以用于监控Kafka的Topic及Consumer消费状况的工具,其配置和使用特别的方便。源项目Github地址为: https://github.com/quantifind/KafkaOffsetMonitor。 最简单的使用方式是从Github上下载一个最新的...
View Article【译】调优Apache Kafka集群 - huxihx - 博客园
今天带来一篇译文“调优Apache Kafka集群”,里面有一些观点并无太多新颖之处,但总结得还算详细。该文从四个不同的目标出发给出了各自不同的参数配置,值得大家一读~...
View Article记一次kafka数据丢失问题的排查 - CSDN博客
数据丢失为大事,针对数据丢失的问题我们排查结果如下。 第一:是否存在数据丢失的问题? 存在,且已重现。第二:是在什么地方丢失的数据,是否是YDB的问题? 数据丢失是在导入阶段,数据并没有写入到Kafka里面,所以YDB也就不会从Kafka里面消费到缺失的数据,数据丢失与延云YDB无关。 第三:是如何发现有数据丢失?...
View ArticleKafka无消息丢失配置 - huxihx - 博客园
Kafka到底会不会丢数据(data loss)? 通常不会,但有些情况下的确有可能会发生。下面的参数配置及Best practice列表可以较好地保证数据的持久性(当然是trade-off,牺牲了吞吐量)。笔者会在该列表之后对列表中的每一项进行讨论,有兴趣的同学可以看下后面的分析。block.on.buffer.full = trueacks = allretries =...
View Article高可用Hadoop平台-Flume NG实战图解篇 - 哥不是小萝莉 - 博客园
1.概述 今天补充一篇关于Flume的博客,前面在讲解高可用的Hadoop平台的时候遗漏了这篇,本篇博客为大家讲述以下内容:Flume NG简述单点Flume NG搭建、运行高可用Flume NG搭建Failover测试截图预览 下面开始今天的博客介绍。2.Flume NG简述 Flume...
View Article【实践】Spark 协同过滤ALS之Item2Item相似度计算优化 - CSDN博客
最近项目在做推荐系统中 match策略中的 CF召回优化,自之前第一版自己实现的基于item的协同过滤算法 http://blog.csdn.net/dengxing1234/article/details/76122465,考虑到用户隐型评分的 稀疏性问题,所以尝试用Spark ml包(非mllib)中的ALS算法的中间产物item的隐性向量,进行进一步item到item的余弦相似度计算。...
View Articleword2vec词向量训练及中文文本相似度计算 - CSDN博客
本文是讲述如何使用word2vec的基础教程,文章比较基础,希望对你有所帮助! 官网C语言下载地址: http://word2vec.googlecode.com/svn/trunk/官网Python下载地址: http://radimrehurek.com/gensim/models/word2vec.html1.简单介绍参考:《Word2vec的核心架构及其应用 · 熊富林,邓怡豪,唐晓晟 ·...
View ArticleLatent Semantic Analysis(LSA) - CSDN博客
背景:什么是LSA?Latent Semantic Analysis(LSA)中文翻译为潜语义分析,也被叫做Latent Semantic Indexing ( LSI...
View ArticlePython提取数字图片特征向量 | kTWO-个人博客
引言 在机器学习中有一种学习叫做手写数字识别,其主要功能就是让机器识别出图片中的数字,其步骤主要包括:图片特征提取、将特征值点阵转化为特征向量、进行模型训练。第一步便是提取图片中的特征提取。数据的预处理关系着后面模型的构建情况,所以,数据的处理也是机器学习中非常重要的一部分。下面我就说一下如何提取图片中的特征向量。 图片灰度化 =>...
View Article手机淘宝推荐中的排序学习-博客-云栖社区-阿里云
周梁:淘宝推荐机器学习技术专家,中国科学院自动化研究所机器学习博士,主要研究工作方向是机器学习、大规模并行算法优化。先后从事过广告CTR预估,MPI机器学习平台搭建,手淘个性化推荐等多方面工作。排序学习是推荐、搜索、广告的核心问题。在手机淘宝的推荐场景中,受制于展示空间的限制,排序学习显得尤为重要。在淘宝,如何从十亿的商品中,挑选出用户 今天喜欢的商品,也是个巨大的挑战。...
View Article金融数据分析与挖掘具体实现方法 -1 - 汪凡 - 博客园
有人让我写一下关于数据挖掘在金融方面的应用,再加上现在金融对数据方面的要求不断提高,准备用两篇随笔来做个入门总结。首先,在看这篇随笔以前稍微补充一点金融方面的知识,因为我不是金融专业的,以下补充知识来自互联网与个人整理,欢迎批评指正并补充说明。1...
View Article