Clik here to view.
MySQL双主（主主）架构方案 - ygqygq2 - 博客园
在企业中，数据库高可用一直是企业的重中之重，中小企业很多都是使用mysql主从方案，一主多从，读写分离等，但是单主存在单点故障，从库切换成主库需要作改动。因此，如果是双主或者多主，就会增加mysql入口，增加高可用。不过多主需要考虑自增长ID问题，这个需要特别设置配置文件，比如双主，可以使用奇偶，总之，主之间设置自增长ID相互不冲突就能完美解决自增长ID冲突问题。主从同步复制原理在开始之前，我们先来...
View ArticleClik here to view.
Centos 更改MySQL5.7数据库目录位置 - CSDN博客
Centos7.3 安装Mysql5.7并修改初始密码基于 CentOS Mysql 安装与主从同步配置详解Centos 通过...
View ArticleClik here to view.
Apache Phoenix的Join操作和优化 - CSDN博客
估计Phoenix中支持Joins，对很多使用HBase的朋友来说，还是比较好的。下面我们就来演示一下。首先看一下几张表的数据：Orders表：OrderIDCustomerIDItemIDQuantityDate1630781C004I00165009-01-20131630782C003I006250009-02-20131630783C002I00234009-03-20131630784C0...
View ArticleClik here to view.
Phoenix二级索引(Secondary Indexing)的使用 - MOBIN - 博客园
摘要HBase只提供了一个基于字典排序的主键索引，在查询中你只能通过行键查询或扫描全表来获取数据，使用Phoenix提供的二级索引，可以避免在查询数据时全表扫描，提高查过性能，提升查询效率 测试环境：数据约370万数据格式：(数据来自 搜狗实验室)三节点集群（一主两从，hadoop和HBase属同一集群） 目录Covered Indexes(覆盖索引)Functional...
View ArticleClik here to view.
Oracle 移动数据文件的操作方法 - CSDN博客
将表空间和数据文件从一个位置移动到另一个位置的操作方法一． OFFLINEOFFLINE 分为ALTER DATABASE 与 ALTER TABLESPACE OFFLINE，他们的区别参看blog： http://www.cndba.cn/Dave/article/1226按数据文件来：1.先将相应的数据文件 offline ALTER DATABASE DATAFILE...
View ArticleClik here to view.
搭建 springboot 2.0 mybatis 读写分离 配置区分不同环境 - 黄青石 - 博客园
最近公司打算使用springboot2.0, springboot支持HTTP/2，所以提前先搭建一下环境。网上很多都在springboot1.5实现的，所以还是有些差异的。接下来咱们一块看一下。 文章的主要思路： 1.工程的结构。 2.重要代码说明。 3.运行结果。 4.总结。 1) 我用的开发工具是Idea。工程的结构如下： 工程结构的每个部分的说明： config:...
View ArticleClik here to view.
Spring Cloud 微服务的那点事 - CSDN博客
什么是微服务微服务的概念源于2014年3月Martin Fowler所写的一篇文章“Microservices”。微服务架构是一种架构模式，它提倡将单一应用程序划分成一组小的服务，服务之间互相协调、互相配合，为用户提供最终价值。每个服务运行在其独立的进程中，服务与服务间采用轻量级的通信机制互相沟通（通常是基于HTTP的RESTful...
View ArticleClik here to view.
Community Detection 社群发现算法 - CSDN博客
社区发现（Community Detection）算法用来发现网络中的社区结构，也可以视为一种广义的 聚类算法。以下是我的一个 PPT 报告，分享给大家。 从上述定义可以看出：社区是一个比较含糊的概念，只给出了一个定性的刻画。另外需要注意的是，社区是一个子图，包含顶点和边。 下面我们以新浪微博用户对应的网络图为例，来介绍相应的社区发现算法 。...
View ArticleClik here to view.
logistic回归详解(二）：损失函数（cost function）详解 - CSDN博客
有监督学习机器学习分为有监督学习，无监督学习，半监督学习，强化学习。对于逻辑回归来说，就是一种典型的有监督学习。 既然是有监督学习，训练集自然可以用如下方式表述： {(x1,y1),(x2,y2),⋯,(xm,ym)}对于这m个训练样本，每个样本本身有n维特征。再加上一个偏置项x0, 则每个样本包含n+1维特征： x=[x0,x1,x2,⋯,xn]T其中x∈Rn+1,x0=1,y∈{0,1}...
View ArticleClik here to view.
CTR预估中GBDT与LR融合方案 - CSDN博客
1、 背景 CTR预估（Click-Through Rate Prediction）是互联网计算广告中的关键环节，预估准确性直接影响公司广告收入。CTR预估中用的最多的模型是LR（Logistic...
View ArticleClik here to view.
【实践】CTR中xgboost/gbdt +lr - CSDN博客
自学习 CTR预估中GBDT与LR融合方案 ，有意用简单暴利的python实现一版GBDT/XGboost做特征选择，融合LR进行CTR的代码demo。1. GBDT + LRpython3.5.3 + scikit-learn0.18.1from scipy.sparse.construct import hstack from sklearn.model_selection import...
View ArticleClik here to view.
word精华编号篇之一自动编号-只谈office-51CTO博客
一. 自动编号的好处 我也曾经有过为编号抓狂的日子，曾经熬夜写某项目方案，又花了整整半天的时间修改格式和编号，痛定思痛发誓再也不能这么过，最理想的就是设置一次编号格式后，点标题按钮编号自动出现。Anything is possible，只要您按照下面的步骤去做。...
View ArticleClik here to view.
Apache JMeter录制HTTPS的方法及测试中常见问题解决 - CSDN博客
HTTPS工作原理在进入正题之前，我想还是有必要再尽量简洁地唠叨一遍一些有关HTTPS工作原理方面的知识，了解这些技术细节有利于你明白为什么JMeter在录制时要求你进行一系列的准备和配置工作，以及它是如何完成这项测试任务的。而且，在不了解原理的情况下开展相关技术领域的测试工作，可能是一件非常“危险”的事情，如果你已经了解了HTTPS的工作原理，你可以跳过此章节。加密算法众所周知，加密算法主要分为对...
View ArticleClik here to view.
利用人工智能检测色情图片 - CSDN博客
色情内容在中国一直处于严格的监管，即使这样，互联网上还是很容易就能访问到色情内容。还记得曾经的“绿坝-花季护航”软件么？由于其识别效果差、软件不稳定，最后不了了之，浪费了大量的人力和金钱。随着计算机视觉和深度学习的发展，算法已经成熟，利用人工智能，我们能够更加精确的识别色情内容。现在有很多云服务商提供鉴黄服务，通过集成鉴黄API到产品中，就可以给产品增加色情过滤功能。这种模式对于大多数互联网产品非常...
View ArticleClik here to view.
Spark-Streaming获取kafka数据的两种方式-Receiver与Direct的方式 - CSDN博客
Spark-Streaming获取kafka数据的两种方式-Receiver与Direct的方式，可以从代码中简单理解成Receiver方式是通过zookeeper来连接kafka队列，Direct方式是直接连接到kafka的节点上获取数据了。 一、基于Receiver的方式 这种方式使用Receiver来获取数据。Receiver是使用Kafka的高层次Consumer...
View ArticleClik here to view.
Spark2.x学习笔记：11、RDD依赖关系与stage划分 - CSDN博客
11、 RDD依赖关系与stage划分Spark中RDD的高效与DAG图有着莫大的关系，在DAG调度中需要对计算过程划分stage，而划分依据就是RDD之间的依赖关系。11.1 窄依赖与宽依赖针对不同的转换函数，RDD之间的依赖关系分类窄依赖（narrow dependency）和宽依赖（wide dependency, 也称 shuffle dependency）。（1）窄依赖窄依赖是指...
View ArticleClik here to view.
Spring Boot 使用Spring security 集成CAS - CSDN博客
1.创建工程 创建Maven工程：springboot-security-cas2.加入依赖 创建工程后，打开pom.xml，在pom.xml中加入以下内容：[html] view plain copy<parent> <groupId>org.springframework.boot</groupId>...
View ArticleClik here to view.
数据仓库数据质量管理【转】 - CSDN博客
一个完善的数据仓库必须含有一个完整的 数据质量管理系统与 元数据管理系统，但是目前国内的数据仓库对数据质量管理这块都不是那么重视，我个人觉得这是一个很大的误区，一个数据仓库如果连数据质量都无法保证，还如何基于做出有效的分析来给决策者做决策的依据？ 从个人理解的角度看，数据质量管理系统应该包含 数据质量检测、脏数据的处理与修正这两块。对于数据质量检测这块，又分为...
View ArticleClik here to view.
MySQL多数据源笔记2-Spring多数据源一主多从读写分离(手写) - 狂小白 - 博客园
一.为什么要进行读写分离呢？ 因为数据库的“写操作”操作是比较耗时的（写上万条条数据到Mysql可能要1分钟分钟）。但是数据库的“读操作”却比“写操作”耗时要少的多（从Mysql读几万条数据条数据可能只要十秒钟）。所以读写分离解决的是，数据库的“写操作”影响了查询的效率问题。如下图所示： 读写分离：...
View ArticleClik here to view.
MySQL多数据源笔记3-分库分表理论和各种中间件 - 狂小白 - 博客园
一.使用中间件的好处 使用中间件对于主读写分离新增一个从数据库节点来说，可以不用修改代码，达到新增节点数据库而不影响到代码的修改。因为如果不用中间件，那么在代码中自己是先读写分离，如果新增节点，你进行写操作时，你的轮询求模的数据量就要修改。但是中间件的维护也很麻烦的。 二.各种中间件...
View Article