Ttfcfc ttfcfc

分布式Id生成器

实现动机

传统数据库软件开发中，主键自动生成技术是基本需求。而各大数据库对于该需求也提供了相应的支持，比如MySQL的自增键。对于MySQL而言，分库分表之后，不同表生成全局唯一的Id是非常棘手的问题。因为同一个逻辑表内的不同实际表之间的自增键是无法互相感知的，这样会造成重复Id的生成。我们当然可以通过约束表生成键的规则来达到数据的不重复，但是这需要引入额外的运维力量来解决重复性问题，并使框架缺乏扩展性。

目前有许多第三方解决方案可以完美解决这个问题，比如UUID等依靠特定算法自生成不重复键，或者通过引入Id生成服务等。但也正因为这种多样性导致了Sharding-JDBC如果强依赖于任何一种方案就会限制其自身的发展。

遗留数据同步方案（Loader + Syncer）具体方案如下：

使用 Mydumper + TiDB Loader 全量导出 MySQL 库中数据，并记录 SavePoint，然后导入 TiDB。使用 TiDB Syncer 做实时增量同步，将 MySQL 中数据同步到 TiDB。

将 MyCAT 中按月拆分的表通过 ETL 以无主键的形式导回 MySQL 单表（ MyCAT 分表中存在主键重复，不能单纯直接导入 TiDB，并且当时 TiDB 对于 ETL 工具的支持还未完善，无法使用 ETL工具导入 TiDB），只保留当前月份数据不导入。

将重新整合后的 MySQL 单表数据通过 Mydumper + TiDB Loader 导入 TiDB。

待上线当天晚上，将当前月份数据导回 MySQL（重建主键），再通过 Mydumper + TiDB Loader 导入TiDB。

Moved to git repository: https://github.com/denji/nginx-tuning

NGINX Tuning For Best Performance

For this configuration you can use web server you like, i decided, because i work mostly with it to use nginx.

Generally, properly configured nginx can handle up to 400K to 500K requests per second (clustered), most what i saw is 50K to 80K (non-clustered) requests per second and 30% CPU load, course, this was 2 x Intel Xeon with HyperThreading enabled, but it can work without problem on slower machines.

You must understand that this config is used in testing environment and not in production so you will need to find a way to implement most of those features best possible for your servers.

	import java.io.Serializable;
	import java.util.ArrayList;
	import java.util.HashMap;
	import java.util.Iterator;
	import java.util.List;
	import java.util.Map;

	import org.springframework.data.domain.Page;
	import org.springframework.data.domain.Pageable;
	import org.springframework.data.domain.Sort;

	import java.security.MessageDigest;
	import java.security.NoSuchAlgorithmException;

	/**
	* 【转】URL短地址压缩算法微博短地址原理解析
	* http://www.cnblogs.com/jinzhao/archive/2012/04/08/2437188.html
	*
	*/
	public class ShortUrl {
	public static String[] generateCode(String url) {

	package com.jd.buy.giftshop.shared.utils.aspect;

	import java.util.HashMap;
	import java.util.HashSet;
	import java.util.Map;
	import java.util.Set;

	import javax.annotation.PostConstruct;

	import org.aspectj.lang.ProceedingJoinPoint;

	package com.jd.couponservice.service.aspect;

	import java.util.HashSet;
	import java.util.Set;
	import java.util.concurrent.Executors;
	import java.util.concurrent.ScheduledExecutorService;
	import java.util.concurrent.TimeUnit;

	import javax.annotation.Resource;

	package com.jd.couponservice.service.aspect;

	import java.util.HashMap;
	import java.util.Map;

	import org.aspectj.lang.ProceedingJoinPoint;
	import org.aspectj.lang.annotation.Around;
	import org.aspectj.lang.annotation.Aspect;
	import org.aspectj.lang.annotation.Pointcut;
	import org.aspectj.lang.reflect.MethodSignature;

	# to generate your dhparam.pem file, run in the terminal
	openssl dhparam -out /etc/nginx/ssl/dhparam.pem 2048

	package com.jd.couponept.couponeptadmin.common.util;

	import java.io.Serializable;
	import java.util.List;


	/**
	* Page查询结果对象
	* @author YANGLiN
	*/