У меня есть ArrayList<String>
, и я хочу удалить из него повторяющиеся строки. Как я могу это сделать?
Как удалить повторяющиеся элементы из ArrayList?
Ответ 1
Если вам не нужны дубликаты в Collection
, вам следует подумать о том, почему вы используете Collection
которая допускает дублирование. Самый простой способ удалить повторяющиеся элементы - это добавить содержимое в Set
(что не допустит дублирования), а затем добавить Set
обратно в ArrayList
:
Set<String> set = new HashSet<>(yourList);
yourList.clear();
yourList.addAll(set);
Конечно, это разрушает порядок элементов в ArrayList
.
Ответ 2
Хотя преобразование ArrayList
в HashSet
эффективно удаляет дубликаты, если вам нужно сохранить порядок вставки, я предпочел бы вам использовать этот вариант
// list is some List of Strings
Set<String> s = new LinkedHashSet<>(list);
Затем, если вам нужно вернуть ссылку List
, вы можете снова использовать конструктор преобразования.
Ответ 3
В Java 8:
List<String> deduped = list.stream().distinct().collect(Collectors.toList());
Обратите внимание, что для для корректной работы фильтра следует соблюдать hashCode-equals контракт для членов списка.
Ответ 4
Если вы не хотите дублировать, используйте Set вместо List
. Чтобы преобразовать a List
в Set
, вы можете использовать следующий код:
// list is some List of Strings
Set<String> s = new HashSet<String>(list);
Если это действительно необходимо, вы можете использовать ту же конструкцию, чтобы преобразовать Set
обратно в List
.
Ответ 5
Предположим, что у нас есть список String
:
List<String> strList = new ArrayList<>(5);
// insert up to five items to list.
Затем мы можем удалить повторяющиеся элементы несколькими способами.
До Java 8
List<String> deDupStringList = new ArrayList<>(new HashSet<>(strList));
Примечание. Если мы хотим сохранить порядок вставки, нам нужно использовать LinkedHashSet
вместо HashSet
Использование Guava
List<String> deDupStringList2 = Lists.newArrayList(Sets.newHashSet(strList));
Использование Java 8
List<String> deDupStringList3 = strList.stream().distinct().collect(Collectors.toList());
Примечание. Если мы хотим собрать результат в конкретной реализации списка, например LinkedList
мы можем изменить приведенный выше пример как:
List<String> deDupStringList3 = strList.stream().distinct()
.collect(Collectors.toCollection(LinkedList::new));
Мы можем использовать parallelStream
также в приведенном выше коде, но это может не дать ожидаемых преимуществ использования. Проверьте этот вопрос для получения дополнительной информации.
Ответ 6
Вот способ, который не влияет на порядок составления списка:
ArrayList l1 = new ArrayList();
ArrayList l2 = new ArrayList();
Iterator iterator = l1.iterator();
while (iterator.hasNext()) {
YourClass o = (YourClass) iterator.next();
if(!l2.contains(o)) l2.add(o);
}
l1 - исходный список, а l2 - список без повторяющихся элементов (убедитесь, что у YourClass есть метод equals в соответствии с тем, что вы хотите отстаивать для равенства)
Ответ 7
Вы также можете сделать это таким образом и сохранить порядок:
// delete duplicates (if any) from 'myArrayList'
myArrayList = new ArrayList<String>(new LinkedHashSet<String>(myArrayList));
Ответ 8
Java 8 потоков обеспечивают очень простой способ удаления повторяющихся элементов из списка. Используя отличный метод. Если у нас есть список городов, и мы хотим удалить дубликаты из этого списка, это можно сделать в одной строке -
List<String> cityList = new ArrayList<>();
cityList.add("Delhi");
cityList.add("Mumbai");
cityList.add("Bangalore");
cityList.add("Chennai");
cityList.add("Kolkata");
cityList.add("Mumbai");
cityList = cityList.stream().distinct().collect(Collectors.toList());
Ответ 9
Существует также ImmutableSet
из Guava в качестве опции (здесь - это документация):
ImmutableSet.copyOf(list);
Ответ 10
Можно удалить дубликаты из arraylist без использования HashSet или еще одного arraylist.
Попробуйте этот код..
ArrayList<String> lst = new ArrayList<String>();
lst.add("ABC");
lst.add("ABC");
lst.add("ABCD");
lst.add("ABCD");
lst.add("ABCE");
System.out.println("Duplicates List "+lst);
Object[] st = lst.toArray();
for (Object s : st) {
if (lst.indexOf(s) != lst.lastIndexOf(s)) {
lst.remove(lst.lastIndexOf(s));
}
}
System.out.println("Distinct List "+lst);
Выход
Duplicates List [ABC, ABC, ABCD, ABCD, ABCE]
Distinct List [ABC, ABCD, ABCE]
Ответ 11
Наверное, немного перебор, но мне нравится такая изолированная проблема.:)
Этот код использует временный набор (для проверки уникальности), но удаляет элементы непосредственно в исходном списке. Так как удаление элемента внутри ArrayList может вызвать огромное количество копий массивов, избегается метод remove (int).
public static <T> void removeDuplicates(ArrayList<T> list) {
int size = list.size();
int out = 0;
{
final Set<T> encountered = new HashSet<T>();
for (int in = 0; in < size; in++) {
final T t = list.get(in);
final boolean first = encountered.add(t);
if (first) {
list.set(out++, t);
}
}
}
while (out < size) {
list.remove(--size);
}
}
Пока мы на нем, здесь версия для LinkedList (намного лучше!):
public static <T> void removeDuplicates(LinkedList<T> list) {
final Set<T> encountered = new HashSet<T>();
for (Iterator<T> iter = list.iterator(); iter.hasNext(); ) {
final T t = iter.next();
final boolean first = encountered.add(t);
if (!first) {
iter.remove();
}
}
}
Используйте интерфейс маркера для представления единого решения для списка:
public static <T> void removeDuplicates(List<T> list) {
if (list instanceof RandomAccess) {
// use first version here
} else {
// use other version here
}
}
EDIT: Я думаю, что дженерики вообще не добавляют никакой ценности. О, хорошо.:)
Ответ 12
это может решить проблему:
private List<SomeClass> clearListFromDuplicateFirstName(List<SomeClass> list1) {
Map<String, SomeClass> cleanMap = new LinkedHashMap<String, SomeClass>();
for (int i = 0; i < list1.size(); i++) {
cleanMap.put(list1.get(i).getFirstName(), list1.get(i));
}
List<SomeClass> list = new ArrayList<SomeClass>(cleanMap.values());
return list;
}
Ответ 13
public static void main(String[] args){
ArrayList<Object> al = new ArrayList<Object>();
al.add("abc");
al.add('a');
al.add('b');
al.add('a');
al.add("abc");
al.add(10.3);
al.add('c');
al.add(10);
al.add("abc");
al.add(10);
System.out.println("Before Duplicate Remove:"+al);
for(int i=0;i<al.size();i++){
for(int j=i+1;j<al.size();j++){
if(al.get(i).equals(al.get(j))){
al.remove(j);
j--;
}
}
}
System.out.println("After Removing duplicate:"+al);
}
Ответ 14
Если вы хотите использовать стороннюю библиотеку, вы можете использовать метод distinct()
в Eclipse Collections (ранее коллекции GS).
ListIterable<Integer> integers = FastList.newListWith(1, 3, 1, 2, 2, 1);
Assert.assertEquals(
FastList.newListWith(1, 3, 2),
integers.distinct());
Преимущество использования distinct()
вместо преобразования в набор, а затем обратно в список состоит в том, что distinct()
сохраняет порядок исходного списка, сохраняя первое вхождение каждого элемента. Он реализован с использованием как Set, так и List.
MutableSet<T> seenSoFar = UnifiedSet.newSet();
int size = list.size();
for (int i = 0; i < size; i++)
{
T item = list.get(i);
if (seenSoFar.add(item))
{
targetCollection.add(item);
}
}
return targetCollection;
Если вы не можете преобразовать исходный список в тип коллекций Eclipse, вы можете использовать ListAdapter для получения того же API.
MutableList<Integer> distinct = ListAdapter.adapt(integers).distinct();
Примечание: Я являюсь коммиттером для коллекций Eclipse.
Ответ 15
Эти три строки кода могут удалить дублированный элемент из ArrayList или любой коллекции.
List<Entity> entities = repository.findByUserId(userId);
Set<Entity> s = new LinkedHashSet<Entity>(entities);
entities.clear();
entities.addAll(s);
Ответ 16
Когда вы заполняете ArrayList, используйте условие для каждого элемента. Например:
ArrayList< Integer > al = new ArrayList< Integer >();
// fill 1
for ( int i = 0; i <= 5; i++ )
if ( !al.contains( i ) )
al.add( i );
// fill 2
for (int i = 0; i <= 10; i++ )
if ( !al.contains( i ) )
al.add( i );
for( Integer i: al )
{
System.out.print( i + " ");
}
Мы получим массив {0, 1, 2, 3, 4, 5, 6, 7, 8, 9, 10}
Ответ 17
Если вы хотите сохранить свой заказ, лучше использовать LinkedHashSet. Поскольку, если вы хотите передать этот список в запрос на вставку путем его итерации, порядок будет сохранен.
Попробуйте это
LinkedHashSet link=new LinkedHashSet();
List listOfValues=new ArrayList();
listOfValues.add(link);
Это преобразование будет очень полезно, если вы хотите вернуть список, но не набор.
Ответ 18
Код:
List<String> duplicatList = new ArrayList<String>();
duplicatList = Arrays.asList("AA","BB","CC","DD","DD","EE","AA","FF");
//above AA and DD are duplicate
Set<String> uniqueList = new HashSet<String>(duplicatList);
duplicatList = new ArrayList<String>(uniqueList); //let GC will doing free memory
System.out.println("Removed Duplicate : "+duplicatList);
Примечание: Определенно, накладные расходы памяти.
Ответ 19
ArrayList<String> city=new ArrayList<String>();
city.add("rajkot");
city.add("gondal");
city.add("rajkot");
city.add("gova");
city.add("baroda");
city.add("morbi");
city.add("gova");
HashSet<String> hashSet = new HashSet<String>();
hashSet.addAll(city);
city.clear();
city.addAll(hashSet);
Toast.makeText(getActivity(),"" + city.toString(),Toast.LENGTH_SHORT).show();
Ответ 20
Если вы используете модель типа List<T>/ArrayList<T>. Надеюсь, это поможет вам.
Вот мой код без использования какой-либо другой структуры данных, такой как set или hashmap
for(int i = 0; i < Models.size(); i++) {
for(int j = i + 1; j < Models.size(); j++) {
if(Models.get(i).getName().equals(Models.get(j).getName())){
Models.remove(j);
j--;
}
}
}
Ответ 21
Как говорилось ранее, вы должны использовать класс, реализующий интерфейс Set вместо List, чтобы быть уверенным в единстве элементов. Если вам нужно сохранить порядок элементов, тогда можно использовать интерфейс SortedSet; класс TreeSet реализует этот интерфейс.
Ответ 22
LinkedHashSet сделает трюк.
String[] arr2 = {"5","1","2","3","3","4","1","2"};
Set<String> set = new LinkedHashSet<String>(Arrays.asList(arr2));
for(String s1 : set)
System.out.println(s1);
System.out.println( "------------------------" );
String[] arr3 = set.toArray(new String[0]);
for(int i = 0; i < arr3.length; i++)
System.out.println(arr3[i].toString());
//вывод: 5,1,2,3,4
Ответ 23
List<String> result = new ArrayList<String>();
Set<String> set = new LinkedHashSet<String>();
String s = "ravi is a good!boy. But ravi is very nasty fellow.";
StringTokenizer st = new StringTokenizer(s, " ,. ,!");
while (st.hasMoreTokens()) {
result.add(st.nextToken());
}
System.out.println(result);
set.addAll(result);
result.clear();
result.addAll(set);
System.out.println(result);
output:
[ravi, is, a, good, boy, But, ravi, is, very, nasty, fellow]
[ravi, is, a, good, boy, But, very, nasty, fellow]
Ответ 24
Это используется для списка ваших пользовательских объектов
public List<Contact> removeDuplicates(List<Contact> list) {
// Set set1 = new LinkedHashSet(list);
Set set = new TreeSet(new Comparator() {
@Override
public int compare(Object o1, Object o2) {
if (((Contact) o1).getId().equalsIgnoreCase(((Contact) o2).getId()) /*&&
((Contact)o1).getName().equalsIgnoreCase(((Contact)o2).getName())*/) {
return 0;
}
return 1;
}
});
set.addAll(list);
final List newList = new ArrayList(set);
return newList;
}
Ответ 25
вы можете использовать вложенный цикл:
ArrayList<Class1> l1 = new ArrayList<Class1>();
ArrayList<Class1> l2 = new ArrayList<Class1>();
Iterator iterator1 = l1.iterator();
boolean repeated = false;
while (iterator1.hasNext())
{
Class1 c1 = (Class1) iterator1.next();
for (Class1 _c: l2) {
if(_c.getId() == c1.getId())
repeated = true;
}
if(!repeated)
l2.add(c1);
}
Ответ 26
for(int a=0;a<myArray.size();a++){
for(int b=a+1;b<myArray.size();b++){
if(myArray.get(a).equalsIgnoreCase(myArray.get(b))){
myArray.remove(b);
dups++;
b--;
}
}
}
Ответ 27
import java.util.*;
class RemoveDupFrmString
{
public static void main(String[] args)
{
String s="appsc";
Set<Character> unique = new LinkedHashSet<Character> ();
for(char c : s.toCharArray()) {
System.out.println(unique.add(c));
}
for(char dis:unique){
System.out.println(dis);
}
}
}
Ответ 28
public Set<Object> findDuplicates(List<Object> list) {
Set<Object> items = new HashSet<Object>();
Set<Object> duplicates = new HashSet<Object>();
for (Object item : list) {
if (items.contains(item)) {
duplicates.add(item);
} else {
items.add(item);
}
}
return duplicates;
}
Ответ 29
ArrayList<String> list = new ArrayList<String>();
HashSet<String> unique = new LinkedHashSet<String>();
HashSet<String> dup = new LinkedHashSet<String>();
boolean b = false;
list.add("Hello");
list.add("Hello");
list.add("how");
list.add("are");
list.add("u");
list.add("u");
for(Iterator iterator= list.iterator();iterator.hasNext();)
{
String value = (String)iterator.next();
System.out.println(value);
if(b==unique.add(value))
dup.add(value);
else
unique.add(value);
}
System.out.println(unique);
System.out.println(dup);
Ответ 30
Если вы хотите удалить дубликаты из ArrayList, найдите следующую логику,
public static Object[] removeDuplicate(Object[] inputArray)
{
long startTime = System.nanoTime();
int totalSize = inputArray.length;
Object[] resultArray = new Object[totalSize];
int newSize = 0;
for(int i=0; i<totalSize; i++)
{
Object value = inputArray[i];
if(value == null)
{
continue;
}
for(int j=i+1; j<totalSize; j++)
{
if(value.equals(inputArray[j]))
{
inputArray[j] = null;
}
}
resultArray[newSize++] = value;
}
long endTime = System.nanoTime()-startTime;
System.out.println("Total Time-B:"+endTime);
return resultArray;
}