Linq判断List<List<T>>中的重复项-CSDN论坛

Linq判断List<List<T>>中的重复项

.NET技术 > LINQ

收藏回复

[问题点数：40分，结帖人idonotknowwhatislife]

⋅ASP.NET MVC抓取动态生成的图片---涉及权限问题 ⋅EF+Linq，执行复杂排序查询 ⋅Linq判断List<List<T>>中的重复项 更多帖子 关注私信空间博客 活着生活 等级 本版专家分：64 结帖率 100%

导入Excel之前要检查一遍，看是否有重复的行等错误，多个模块有导入功能，我就想干脆写下面这样一个类，用来记录待导入文件中的错误：





    public class ImportLog

    {

        /// <summary>

        /// Excel行号

        /// </summary>

        public int RowID { get; set; }



        /// <summary>

        /// 当前行中每个单元格的值

        /// </summary>

        public List<object> FieldList { get; set; }



        /// <summary>

        /// 是否包含错误

        /// </summary>

        public bool HasError { get; set; }



        /// <summary>

        /// 错误信息

        /// </summary>

        public string ErrorMsg { get; set; }

    }

先拿“检查重复的行”来试试：





        public List<ImportLog> GetRepeatedRows(List<ImportLog> list = null)

        {

            if (list == null)

            {

                list = new List<ImportLog>()

                {

                    new ImportLog(){ RowID=1, FieldList=new List<object>(){"1","11","111"}, ErrorMsg=""},

                    new ImportLog(){ RowID=2, FieldList=new List<object>(){"1","11","111"}, ErrorMsg=""},

                    new ImportLog(){ RowID=3, FieldList=new List<object>(){"1","11","111","1111"}, ErrorMsg=""},

                    new ImportLog(){ RowID=4, FieldList=new List<object>(){"1","11","111","1112"}, ErrorMsg=""},

                    new ImportLog(){ RowID=5, FieldList=new List<object>(){"1","11","112","1121"}, ErrorMsg=""},

                    new ImportLog(){ RowID=6, FieldList=new List<object>(){"1","11","112","1121"}, ErrorMsg=""},

                    new ImportLog(){ RowID=7, FieldList=new List<object>(){"1","12","121","1211"}, ErrorMsg=""},

                    new ImportLog(){ RowID=8, FieldList=new List<object>(){"1","12","122","1221"}, ErrorMsg=""},

                    new ImportLog(){ RowID=9, FieldList=new List<object>(){"1","13","131","1311"}, ErrorMsg=""},

                    new ImportLog(){ RowID=10, FieldList=new List<object>(){"2","21","211","2111"}, ErrorMsg=""},

                    new ImportLog(){ RowID=11, FieldList=new List<object>(){"2","21","211","2111"}, ErrorMsg=""},

                    new ImportLog(){ RowID=11, FieldList=new List<object>(){"2","21","211","2111"}, ErrorMsg=""},

                };

            }

            //方式1：成功，但效率貌似不高

            //var ret1 = list.FindAll(a => list.FindAll(b => b.FieldList.Intersect(a.FieldList).Count() == a.FieldList.Count).Count > 1);



            //方式2：group by m.FieldList into g 失败

            var ret2 = (from t in list

                        where (

                         from d in

                             (

                                 from m in list

                                 group m by m.FieldList into g

                                 where g.Count() > 1

                                 select g

                                 )

                         select d.Key

                        ).Contains(t.FieldList)

                        select t).ToList();

            var count = ret2.Count;//count=0 ……



            return ret2;



        }

各位大神，谁能给优化一下方式1，再给改改方式2？
拜谢！

呃，准备下班了，明天上午来了给分，见谅……

2012-10-22 17:29:36

点赞只看楼主引用举报楼主收起

展开阅读全文

⋅.........

⋅高分求 C# 长字符串压缩/解压缩算法

⋅[建议] 建议将 .NET大版下的 LINQ 小版块更名为 EntityFrameowrk/LINQ 版块

更多帖子

关注私信空间博客

版主

兔子党-督察

等级

本版专家分：172907

勋章

微软MVP 2016年4月荣获微软MVP称号
2015年4月荣获微软MVP称号
2014年4月荣获微软MVP称号
2013年4月荣获微软MVP称号
2012年4月荣获微软MVP称号
2011年4月荣获微软MVP称号

红花 2010年9月挨踢职涯大版内专家分月排行榜第一

黄花 2010年12月 .NET技术大版内专家分月排行榜第二
2010年10月挨踢职涯大版内专家分月排行榜第二
2010年8月挨踢职涯大版内专家分月排行榜第二

蓝花 2011年7月 .NET技术大版内专家分月排行榜第三
2010年11月 .NET技术大版内专家分月排行榜第三

var ret2=list.GroupBy(l=>string.Join(",",l.FieldList.OrderBy(x=>x).Select(x=>x.ToString()).ToArray()))

			 .Where(g=>g.Count()>1);

2012-10-22 19:44:11

点赞只看TA 引用举报 #1得分 30

⋅ASP.NET MVC抓取动态生成的图片---涉及权限问题 ⋅EF+Linq，执行复杂排序查询 ⋅Linq判断List<List<T>>中的重复项 更多帖子 关注私信空间博客 活着生活 等级 本版专家分：64: 引用 1 楼的回复:
C# code
var ret2=list.GroupBy(l=>string.Join(",",l.FieldList.OrderBy(x=>x).Select(x=>x.ToString()).ToArray()))
.Where(g=>g.Count()>1);

谢了，是个思路。
呃，不过，我是想最终得到一个List<ImportLog>，按照你这样GroupBy()之后得到的是一个IEnumerable<IGrouping<string, ImportLog>>，然后还要遍历list。有个更精简点的办法没？

2012-10-23 13:08:35

点赞只看TA 引用举报 #2得分 0

⋅我的机器上为何没有asptxn.dll ⋅VARIANT data type 的主要功能是什么啊？ ⋅如何判断光驱中光盘的种类和容量？ 更多帖子 关注私信空间博客 sad_4978 等级 本版专家分：180: 我尝试也写了一个，不知道符不符合要求。

var result = list.GroupBy(L => L.RowID).Select(G => G.First()).ToList();

2012-10-23 15:09:56

点赞只看TA 引用举报 #3得分 10

⋅.........

⋅高分求 C# 长字符串压缩/解压缩算法

⋅[建议] 建议将 .NET大版下的 LINQ 小版块更名为 EntityFrameowrk/LINQ 版块

更多帖子

关注私信空间博客

版主

兔子党-督察

等级

本版专家分：172907

勋章

微软MVP 2016年4月荣获微软MVP称号
2015年4月荣获微软MVP称号
2014年4月荣获微软MVP称号
2013年4月荣获微软MVP称号
2012年4月荣获微软MVP称号
2011年4月荣获微软MVP称号

红花 2010年9月挨踢职涯大版内专家分月排行榜第一

黄花 2010年12月 .NET技术大版内专家分月排行榜第二
2010年10月挨踢职涯大版内专家分月排行榜第二
2010年8月挨踢职涯大版内专家分月排行榜第二

蓝花 2011年7月 .NET技术大版内专家分月排行榜第三
2010年11月 .NET技术大版内专家分月排行榜第三: 引用 1 楼  的回复:
C# code
var ret2=list.GroupBy(l=>string.Join(",",l.FieldList.OrderBy(x=>x).Select(x=>x.ToString()).ToArray()))
             .Where(g=>g.Count()>1);

var ret2=(from l in list
         group l by string.Join(",",l.FieldList.OrderBy(x=>x).Select(x=>x.ToString()).ToArray()) into g
         from x in g
          select x).ToList();

2012-10-23 15:25:55

点赞只看TA 引用举报 #4得分 0

⋅ASP.NET MVC抓取动态生成的图片---涉及权限问题 ⋅EF+Linq，执行复杂排序查询 ⋅Linq判断List<List<T>>中的重复项 更多帖子 关注私信空间博客 活着生活 等级 本版专家分：64

引用 3 楼的回复:

我尝试也写了一个，不知道符不符合要求。

var result = list.GroupBy(L => L.RowID).Select(G => G.First()).ToList();

呃，忘了说明一下了：List<object> FieldList，代表的是Excel一行中的单元格，只要这个属性相同，就视为重复的行，行号只是用来标记，不计入判断……
而且，既然是检查Excel文件里的重复的行，那么不能只是把重复的内容找到，还要找到文件里都有哪些行是重复的。
所以，你这个似乎可以改一下：





            var listRepeat = list.GroupBy(L => L.FieldList).Select(G => G.First()).ToList();

            listRet.FindAll(l => listRepeat.FindAll(r => l.FieldList.SequenceEqual(r.FieldList)).Count > 1);

2012-10-23 15:44:08

点赞只看TA 引用举报 #5得分 0

我一朋友还给了另外一种写法，但是，效率更低……



            var listRet = list.Where(m => list.Count(c => c.FieldList.SequenceEqual(m.FieldList)) > 1).ToList();

2012-10-23 15:45:55

点赞只看TA 引用举报 #6得分 0

引用 4 楼的回复:

引用 1 楼的回复:

C# code
var ret2=list.GroupBy(l=>string.Join(",",l.FieldList.OrderBy(x=>x).Select(x=>x.ToString()).ToArray()))
.Where(g=>g.Count()>1);

var ret2=(from l in list
group l ……

Tim兄，你这个不太符合我的规则啊，我是要把【重复的行】取出来……
所以：



            listRet = (from l in list

                        group l by string.Join(",", l.FieldList.OrderBy(x => x).Select(x => x.ToString()).ToArray()) into g

                        where g.Count() > 1//有“重复”的行

                        from x in g

                        select x).ToList();

然后，另外那个有点错，我也改了改：



            var listRepeat = list.GroupBy(L => string.Join(",", L.FieldList.OrderBy(x => x))).Where(c => c.Count() > 1).Select(G => G.First()).ToList();

            listRepeat.ForEach(m => listRet.AddRange(list.FindAll(r => r.FieldList.SequenceEqual(m.FieldList))));

呃，后面如果没人回复的话，我就再说不了话了吧？
那如果再没人来，就结贴了，上面两位兄弟都有分

2012-10-23 16:37:32

点赞只看TA 引用举报 #7得分 0

⋅.........

⋅高分求 C# 长字符串压缩/解压缩算法

⋅[建议] 建议将 .NET大版下的 LINQ 小版块更名为 EntityFrameowrk/LINQ 版块

更多帖子

关注私信空间博客

版主

兔子党-督察

等级

本版专家分：172907

勋章

微软MVP 2016年4月荣获微软MVP称号
2015年4月荣获微软MVP称号
2014年4月荣获微软MVP称号
2013年4月荣获微软MVP称号
2012年4月荣获微软MVP称号
2011年4月荣获微软MVP称号

红花 2010年9月挨踢职涯大版内专家分月排行榜第一

黄花 2010年12月 .NET技术大版内专家分月排行榜第二
2010年10月挨踢职涯大版内专家分月排行榜第二
2010年8月挨踢职涯大版内专家分月排行榜第二

蓝花 2011年7月 .NET技术大版内专家分月排行榜第三
2010年11月 .NET技术大版内专家分月排行榜第三: 取出所有重复的行：
var ret2=(from l in list
  group l by string.Join(",",l.FieldList.OrderBy(x=>x).Select(x=>x.ToString()).ToArray()) into g
  where g.Count()>1
  from x in g
  select x).ToList();

2012-10-23 16:51:49

点赞只看TA 引用举报 #8得分 0

⋅ASP.NET MVC抓取动态生成的图片---涉及权限问题 ⋅EF+Linq，执行复杂排序查询 ⋅Linq判断List<List<T>>中的重复项 更多帖子 关注私信空间博客 活着生活 等级 本版专家分：64: ok，结贴！
多谢Tim兄和sad_4978兄捧场！

2012-10-24 09:14:53

点赞只看TA 引用举报 #9得分 0

收起

收藏回复

活着生活

等级：

关注私信 TA的帖子

.NET[C#]LINQ查询List集合中所有重复的元素如何实现？(转载): 方案一 var query = lst.GroupBy(x=>x) .Where(g=>g.Count()>1) .Select(y=>y.Key) ... .ToList(); 如果还需要找出重复的元素个数： var query = lst.GroupBy(x=>x) ...

linq 去除list集合中的重复项。: //去除重复的项 var groups = ZCPDSJList.Instance.GroupBy(card=>card.AZDD).OrderByDescending(group=>group.Key);

c# Linq List<T>去除其中重复的项: //要去重的 ...T> listTest； var resultlist= listTest.GroupBy(p =>p.Id).Select(g => g.First()).ToList(); 　转载于:https://www.cnblogs.com/Kendy/p/11058771.html...

.net 判断list数据里是否有重复元素，使用linq: List<Person> _list = new List<Person>(); Person per0 = new Person(); per0.Age = 10; per0.Name = "test0"; _list.Add(per0); Per...

Linq利用Distinct去除重复项（可自己指定）: 添加一个扩展方法public static IEnumerable DistinctBy (this IEnumerable source, Func keySelector) { HashSet seenKeys = new HashSet(); foreach (TSource element in source) { if (seenKeys.Add

Linq去除重复的数据: Linq去除重复的数据

C#.Net：List<T>集合列表的Linq语句查询示例: 1、单个List集合列表查询： //筛选用户名、密码相符的用户 var resultList = from item in selectList where item.PUsername.ToLower() == loginEntity.Username.ToLower() && item.PLoginPswd ==loginEntity....

Linq 中查询一个表中指定的字段: Linq中查询一个表中指定的几个字段： var ts = t.FindAllItems().Where(P => P.CompanyID == CurSiteUser.CompanyId).Select(s => new { BillPeriod = s.BillPeriod，FieldB=s.FieldB }).Distinct().ToList()....

linq list 去除重复项: list=list.GroupBy(t=>t.issuercode).Select(t=>t.First()).ToList();

Newtonsoft.Json.Linq.JArray 转换成 List<T>: I have the following variable of type {Newtonsoft.Json.Linq.JArray}. 我有这么一组数组对象properties["Value"] {[ { "Name": "Username", "Selected": true }, { "Name": "Password", "Selected":

Linq连接两个List<T>列表实例详解（Linq inner join，left join）: 本章节主要介绍Linq的联接运算，对两个List< T >，分别 inner join 和 left join 联接，以此为例，进行实例详解，代码也是自己编写，亲测通过的，可以直接拿着当demo使用。联接是指将一个数据源对象与另一个数据源...

C# 中使用Linq和Lambda表达式对List<T>进行排序: C#中List排序的两种方法 List stu = (ListStudent>)Session["StudentList"]; Linq表达式: //按学号降序 ListStudent> stuList = (from s in stu orderby s.stuNO descending select s)....

linq查询根据list的一个字段去重，某个字段数据相同的只取一条: //筛选同一分钟内的数据，只取一条 var zb_wb = (from a in list_pos from b in list_wb where b.YCWHJL_QSSJ.Value.ToString("yyMMddHHmm") == a.Time.ToString("yyMMddHHmm")...

List集合使用Linq进行in条件查询: 查询companys集合中Id在lstID集合中的对象，类似于SQL中select * from B where A in(1,2,3) List<Company> lstCom = companys.ToList<Company>().FindAll(new Predicate<Company>(r => ...

C# Linq处理 Where条件筛选: C# Linq处理 Where条件筛选

C# Linq 交集、并集、差集、去重: using System.Linq; List ListA = new List(); List ListB = new List(); List ListResult = new List(); ListResult = ListA.Distinct().ToList();//去重 ListResult = ListA.Except(ListB...

linq 查询过滤数据中某个值是否在数组中: 条件如下：表A（公司表）：ID(INT,PK),Name（nvarchar(255)） ...求：表B中CompanyId 在数组中的所有数据。先创建一个int型数组，个人喜欢先用list再转。如下： var companyList = _companyQuery.

Linq 和 list集合去除重复项: 方法一： IQueryable listNotice = null; listNotice = (from news in base.CabinData....此种去除方法弊端：只要对象中有重复的字段都会去除，会比对对象中所有的字段。方法二：把linq查询结果转成li

使用Linq中的Distinct方法对序列进行去重操作: 使用Linq提供的扩展方法Distinct可以去除序列中的重复元素。该方法具有以下两种重载形式：（1）public static IEnumerable Distinct(this IEnumerable source) （重载1）通过使用默认的相等比较器对值进行...

linq list select用法注意事项: 下面是我自己做的一个例子

LINQ的OrderBy有多个字段 (List): 我在找将由优先字段排序，然后如果在优先个字段中任何重复由第二个字段对列表排序。例如，我想要的结果看起来像这样（排序最后则先亚当斯，约翰・史密斯，史密斯，彼得汤普森 CodeGo.net，弗雷德我已经看到了...

List<String>Linq筛选数据: linq用法如下： List list = new List(); var q = from String s in list where s[0] = "A" && s.Length = 4 //字符串是以A开头，并且长度为4位的 select s;q就是筛选后的结

C# 用Linq实现DataTable实现重复数据过滤: 未过滤前：过滤后（仅会过滤掉完全一样的数据）： ...DataTable dt = this.JsonToDataTable("[{\"Code\":\"SortId\",\"Name\":\"SortId\"},{\"Code\":\"SortCode\",\"Name\":\"编号\"},{\"Code\":\...

linq更改list实体对象中的字段批量条件: List listResut = new List(); for (int i = 0; i { listResut.Add(new ProductInfoResult() { CategoryID = i }); } List listResut2 = new List(); l

Linq 左连接 left join: Suppose you have a tblRoom and tblUserInfo. Now, you need to select all the rooms regardless of whether the room has user information or not. This calls for a LEFT JOIN which will select everything

Linq 分组，求和，多个字段排序，取前10条: List GetProData() { List list =talkbll.GetProTalkBack(Convert.ToDateTime(txtStartDate.Text), Convert.ToDateTime(txtEndDate.Text)); List proList=new List(); var query = lis

Linq distinct去重方法之一: Linq distinct去重方法之一

LINQ需要select多个值时怎么办？: LINQ需要在一次执行中select多项数据，特别是join连接多个表之后需要在不同表内各选几项数据。只需要两步：一、新建一个类，并定义好其成员，比如： public class third { public string LessonName { get; set;...

linq group by 多列值实现: 场景是：//这么一个LIST，最终想得到的结果如下： List list = new List(); list.Add(new TestData() { Name="A", Count=3,BatNum="001"}); list.Add(new TestData() { Name = "A", Count = 3,BatNum="001" })...

Newtonsoft.Json.Linq.JArray转换为List<T>: Newtonsoft.Json.Linq.JArray转换为List 环境：c# webapi 现在webapi一般使用json，从前端提交的数据，有时会包括多个数据，如: var list = [ {id: '1', name: 'name1'}, {id: '2', name: 'name2'}, {id: '3',...

相关热词 c# 摘要 c# mvc2 匿名访问 c#qq登录框代码怎么写 c#修改json串 c#string怎么用 c#不包含适用 c# exe 所在路径 c#重载运算符++ add c# list c# 抓取数据