用一个分布式锁，可以用redis实现，然后定时器跑的时候，获取锁成功的再执行逻辑，获取失败不执行任务即可

数据库没有主键， 是万恶之源， 不仅仅是会造成数据重复， 还很容易造成阻塞。

如果不用主键， 那不同的程序都得去同一个点排队判断是否有重复才行。
你一定想这么做就做吧：
https://blog.csdn.net/yenange/article/details/78903480

新建一张表可以吗？可以的话，这个表就见一个主键就行，导入存量的主键数据

3个不同的程序先往这个新表insert，没出现主键冲突，再往工作表insert

我把楼主的情况顺一下，看是不是这样的：
1、有一个数据库，楼主的程序要向这个库里的一个表周期性地写入数据
2、这个数据库你只有写入数据的权限，从系统架构、商务等角度看，不允许修改这个表的结构
3、还有两个进程也在向这个表写入数据，但这两个进程不是你能管控得了的，楼主只能管自己的那部分程序

Quote: 引用 6 楼 hemowolf 的回复:

我把楼主的情况顺一下，看是不是这样的：
1、有一个数据库，楼主的程序要向这个库里的一个表周期性地写入数据
2、这个数据库你只有写入数据的权限，从系统架构、商务等角度看，不允许修改这个表的结构
3、还有两个进程也在向这个表写入数据，但这两个进程不是你能管控得了的，楼主只能管自己的那部分程序

是这样的。
同时有三个程序向这张表周期性的插入数据，PHP,C,和JAVA。PHP和C的我不会做修改，而且C的我没有这个程序的源码，也反编译不了。所以这个问题看各位大师怎么解决，如果说调用存储过程，那也只有我写的调用，其它两个程序我也改不了

看实际使用场景和执行效率： 
1. 数据库锁级别
2. 分布式锁， redis 的互斥setnx
3. 分布式锁，zk使用其临时节点

你这是多个不同语言程序同时运行，没有一个公共的区域判断排他应该不行的。
你可以用数据库的锁，如锁表（或者用个管理表判断表记录的状态排他），再判断记录是否重复
或者你直接锁某个公共路径下的文件等等
不过你这要保证高并发，有难度

Quote: 引用 13 楼 weixin_42374047 的回复:

Quote: 引用 6 楼 hemowolf 的回复:

我把楼主的情况顺一下，看是不是这样的：
1、有一个数据库，楼主的程序要向这个库里的一个表周期性地写入数据
2、这个数据库你只有写入数据的权限，从系统架构、商务等角度看，不允许修改这个表的结构
3、还有两个进程也在向这个表写入数据，但这两个进程不是你能管控得了的，楼主只能管自己的那部分程序

是这样的。
同时有三个程序向这张表周期性的插入数据，PHP,C,和JAVA。PHP和C的我不会做修改，而且C的我没有这个程序的源码，也反编译不了。所以这个问题看各位大师怎么解决，如果说调用存储过程，那也只有我写的调用，其它两个程序我也改不了

别人写的程序最好别动，就算你有这个能力也不要动这念头：万一对方的程序有严重bug，你就只能背锅了！
不过，如果情况是这样的话，即使没有你的程序加进去，光跑 php 和 C 也应该会出现你所说的问题吧！

有没有考虑过联合唯一索引

日志如果是一次写入一条、确定只有三个并发。不如修改这个判定代码，提取三条数据而不是一条出来判定。如果是批处理就直接调用存储过程解决问题。

这么多高手出的主意， 你都认为解决不了， 那只有2个办法了：

1. 加上主键， 让老板出钱， 请人修改 C 和 PHP ， 处理冲突时的异常问题。应该也不需要多少钱， 几百块足够。

2. 跑路。

Quote: 引用 22 楼 yenange 的回复:

这么多高手出的主意， 你都认为解决不了， 那只有2个办法了：

1. 加上主键， 让老板出钱， 请人修改 C 和 PHP ， 处理冲突时的异常问题。应该也不需要多少钱， 几百块足够。

2. 跑路。

你们出的注意我都想倒过了。但没办法啊。第一点，我要保证那两个程序也运行正常，如果新增列设置为主键，那C和PHP的肯定跑不了，因为在执行insert的时候就肯定会报错了，那还不如把他们停了，锁表，一条条插？光我写的就开了五十个线程往表里面插五十条不同的数据，那效率肯定又太低了。有没有更精辟的办法。

看来楼主的问题是无解了

原因很简单，数据库结构不让动，C和PHP两个进程你管不了，而你的Java进程不过是数据库众多访问的客户端之一而已。
想要多个进程在处理数据时不发生冲突，就必须要几个进程的共同协作，现在你能动的只有你的一个Java进程，根本就是做不到的嘛！

所以，我问楼主，即使你的Java进程不启动，光跑PHP和C两个进程，也应该会有冲突，只不过出现冲突的机率会小一点而已。如果光跑PHP和C没有出现过冲突，就说明这两个进程之间有应对机制，楼主可以让你们老板去找PHP和C的提供者要资料。

Quote: 引用 25 楼 hemowolf 的回复:

看来楼主的问题是无解了

原因很简单，数据库结构不让动，C和PHP两个进程你管不了，而你的Java进程不过是数据库众多访问的客户端之一而已。
想要多个进程在处理数据时不发生冲突，就必须要几个进程的共同协作，现在你能动的只有你的一个Java进程，根本就是做不到的嘛！

所以，我问楼主，即使你的Java进程不启动，光跑PHP和C两个进程，也应该会有冲突，只不过出现冲突的机率会小一点而已。如果光跑PHP和C没有出现过冲突，就说明这两个进程之间有应对机制，楼主可以让你们老板去找PHP和C的提供者要资料。

那咱们现在换个问题。
response重定向后，如何用输入流读取那个网站的信息，我在看response API的时候发现只有输出流，没有输入流，request转发也转发不到其它网站，只能转发到本地项目。所以现在真的是一头包。其它的老板，奇葩的项目。

Quote: 引用 26 楼 weixin_42374047 的回复:

Quote: 引用 25 楼 hemowolf 的回复:

看来楼主的问题是无解了

原因很简单，数据库结构不让动，C和PHP两个进程你管不了，而你的Java进程不过是数据库众多访问的客户端之一而已。
想要多个进程在处理数据时不发生冲突，就必须要几个进程的共同协作，现在你能动的只有你的一个Java进程，根本就是做不到的嘛！

所以，我问楼主，即使你的Java进程不启动，光跑PHP和C两个进程，也应该会有冲突，只不过出现冲突的机率会小一点而已。如果光跑PHP和C没有出现过冲突，就说明这两个进程之间有应对机制，楼主可以让你们老板去找PHP和C的提供者要资料。

那咱们现在换个问题。
response重定向后，如何用输入流读取那个网站的信息，我在看response API的时候发现只有输出流，没有输入流，request转发也转发不到其它网站，只能转发到本地项目。所以现在真的是一头包。其它的老板，奇葩的项目。

你说的这个是 servlet 的 response 吧？
在 servlet 里，response 封装的是响应操作，所以它有输出流，没有输入流；输入流是在 request 里得到的。并且，你也无法得到整个网页的信息，只能得到某个请求的表单信息

如过并发很大的话，实时效要求不高，使用MQ，消息排序入库

Quote: 引用 28 楼 z960339491 的回复:

如过并发很大的话，实时效要求不高，使用MQ，消息排序入库

没用的老兄，一个巴掌拍不响！

就象是开车，脚上要踩油门、踩铩车，手上要把握方向盘，按喇叭。人家只让你掌方向盘，不准踩油门、不准踩铩车，这车再牛B的老司机都没法开！

如果要不冲突，要几个进程共同协调处理，可能还要在数据库里做点手脚。而楼主只管得了他自己的Java进程，其它都不让动，搞毛线！Java进程机制再牛B，PHP和C他就不跟你配合，你一点办法都没有！

Quote: 引用 28 楼 z960339491 的回复:

如过并发很大的话，实时效要求不高，使用MQ，消息排序入库

没用的老兄，一个巴掌拍不响！

就象是开车，脚上要踩油门、踩铩车，手上要把握方向盘，按喇叭。人家只让你掌方向盘，不准踩油门、不准踩铩车，这车再牛B的老司机都没法开！

如果要不冲突，要几个进程共同协调处理，可能还要在数据库里做点手脚。而楼主只管得了他自己的Java进程，其它都不让动，搞毛线！Java进程机制再牛B，PHP和C他就不跟你配合，你一点办法都没有！

不管上游是什么语言，只负责吧消息放入MQ中，这个时候消息允许重复，然后在消费MQ消息的时候，逐个消费，逐个校验是否重复，哪里不妥？

Quote: 引用 31 楼 z960339491 的回复:

不管上游是什么语言，只负责吧消息放入MQ中，这个时候消息允许重复，然后在消费MQ消息的时候，逐个消费，逐个校验是否重复，哪里不妥？

上游语言是什么意思？
你是认为楼主的架构是：PHP、C进程把消息给楼主的 Java，然后统一地由Java写进数据库？
如果是这样的话，方案有N种了，估计楼主也不用伤这个脑筋了。

本人从上面讨论的信息中得到的是：
PHP、C、Java　三个进程各自连接到数据库，各自独立地向数据库写入数据。

照这样的话
楼主可以在他的Java写的程序里，把消息放进MQ，这个方面一点问题都没有！
但是还有两个进程，一个PHP写的、一个C写的，这两个进程的消息不会乖乖听你的话，把他们的消息放进你的MQ，因为那是第三方开发的，不是楼主开发的，它们是楼主的老板从别人那里拷贝过来的，这一点楼主管不了人家！

PHP是解释型语言，你可能改改源代码达到你的目的；但C的程序是编译型的，总不能叫楼主反编译可执行文件和库文件吧！就算楼主有这样的本事，本人也不建议这么做，因为只要你改了原代码，那些PHP和C的程序里的Bug可能就要楼主来背锅了。

看来楼主的问题是无解了

原因很简单，数据库结构不让动，C和PHP两个进程你管不了，而你的Java进程不过是数据库众多访问的客户端之一而已。
想要多个进程在处理数据时不发生冲突，就必须要几个进程的共同协作，现在你能动的只有你的一个Java进程，根本就是做不到的嘛！

所以，我问楼主，即使你的Java进程不启动，光跑PHP和C两个进程，也应该会有冲突，只不过出现冲突的机率会小一点而已。如果光跑PHP和C没有出现过冲突，就说明这两个进程之间有应对机制，楼主可以让你们老板去找PHP和C的提供者要资料。

新建一张表可以吗？可以的话，这个表就见一个主键就行，导入存量的主键数据

3个不同的程序先往这个新表insert，没出现主键冲突，再往工作表insert

新建一张表可以吗？可以的话，这个表就见一个主键就行，导入存量的主键数据

3个不同的程序先往这个新表insert，没出现主键冲突，再往工作表insert

新建一张表可以吗？可以的话，这个表就见一个主键就行，导入存量的主键数据

3个不同的程序先往这个新表insert，没出现主键冲突，再往工作表insert

使用spring框架的AOP思想，在业务层进行事物控制就可以解决

小弟现在碰到一个问题，我写的一个程序会每隔一段时间向数据库插入一条数据。有他语言的程序也在向这个数据库的表插入数据。而且还是三个程序同时运行。运行的逻辑都是一样的。一个程序跑的时候没问题，但多个程序同时跑的时候就会出现重复的数据。每个程序都有判断是否存在这一条数据在插入。但没有效果，本来是有解决方案的，设一个在表里面设置一个唯一主键，但现在这种方案弃用，不能在表里面新增列，所以看各位大师有什么办法解决没？

多线程可以解决可以封装成异步方法

也可是试着用线程同步锁实现

使用spring框架的AOP思想，在业务层进行事物控制就可以解决

触发器吧，插入之前查询一次

搞个触发器自己去重

Quote: 引用 楼主 很奇怪的人的回复:

小弟现在碰到一个问题，我写的一个程序会每隔一段时间向数据库插入一条数据。有他语言的程序也在向这个数据库的表插入数据。而且还是三个程序同时运行。运行的逻辑都是一样的。一个程序跑的时候没问题，但多个程序同时跑的时候就会出现重复的数据。每个程序都有判断是否存在这一条数据在插入。但没有效果，本来是有解决方案的，设一个在表里面设置一个唯一主键，但现在这种方案弃用，不能在表里面新增列，所以看各位大师有什么办法解决没？

说个简单粗暴的方法，给这3个程序每个加上sleep，执行的时候让他睡的时间不同，将时间错开，你上述的判断是不是就可以生效了呢？说白了就是个队列谁先进库的问题，我考虑问题可能简单了，我只管大胆假设，然后去尝试。说的对请前辈们纠正我的思路，感谢你