Вариант для распечатки		Пред. тема | След. тема
Форум Программирование под UNIX (Shell скрипты)
Режим отображения только ответов первого уровня		[ Отслеживать ]

Помогите удалить повторяющиеся строки, mintolik (?), 13-Май-18, (0) [смотреть все] Пожалуйста code perl -e for cat file txt print unless s _ code или , михалыч (ok), 07:03 , 13-Май-18, (1)   // 124 awk x 0 Прямо сам себя боюсь , Andrey Mitrofanov (?), 08:01 , 13-Май-18, (2) +4 // а не надо бояться человека с 822 р 822 у 822 ж 822 ь 822 ё 822 м 822 , михалыч (ok), 08:18 , 13-Май-18, (3) +1 Реально круто , PereresusNeVlezaetBuggy (ok), 10:29 , 14-Май-18, (4) // Пасиб Но я тут подумал, что вынужден ёё повторять -- нашёл ссылку с прецеде, Andrey Mitrofanov (?), 11:17 , 14-Май-18, (5) а че все так радуются подобному решению а если файл больше чем память хоть бы хе, Pahanivo (ok), 22:23 , 20-Май-18, (19) А если дождик в засушку а если, а если изворотливый фантазёрКритикуя - предлаг, Аноним (-), 10:12 , 21-Май-18, (21) А если ты сам решил упрощённую для себя любимого постановку задачи - uniq-ом, а , Andrey Mitrofanov (?), 10:32 , 21-Май-18, (22) оттачивать что-либо и подбирать тут малополезно ввиду отсутствия задачи как тако, Pahanivo (ok), 11:10 , 21-Май-18, (23) May 10 14 at 12 05 https unix stackexchange com questions 128775 fastest-uni, Всем Сосать (ok), 15:47 , 17-Май-18, (11) –1 // Всем Сосать, 15 47 , U 17-Май-18 U , 11 Andrey Mitrofanov, 11 17 , U 14-Май, Andrey Mitrofanov (?), 17:42 , 17-Май-18, (12) +1 хы, видимо там тоже -- чтой то с глазами , Аноним (-), 18:31 , 17-Май-18, (13) –1 юник без сорта предлагали 12345667889123456789, Pahanivo (ok), 16:04 , 15-Май-18, (6) –9   // cat file 971 2 3 41 5 6 6 7 82 8 9 cat file 124 uniq 971 2 3 41 5 6 7 82 9 Хм, Аноним (-), 08:13 , 16-Май-18, (7) +4 // что именно повторяющиеся строки удалились или у меня чтой то с глазами Афтар ка, Pahanivo (ok), 10:10 , 16-Май-18, (8) –8 // Нет Там все четко и понятно Да чтой то Ещё раз Простой тест на вниательнос, Аноним (-), 10:28 , 16-Май-18, (9) +2 Нет да, там всё двояко, как минимум удалить повторяющиеся строки повторяющ, Andrey Mitrofanov (?), 10:42 , 16-Май-18, (10) +1 я довольно легко решаю детские задачи но в итоге были не удалены повторяющие, Pahanivo (ok), 15:33 , 18-Май-18, (14) –5 Это не так Но нужно лишь избавиться от повторяющихся строк Итог - задача не реш, Аноним (-), 06:58 , 19-Май-18, (15) –1 мда, какая именно задача не решена удаление повторов или поиск уникальных афтар, Pahanivo (ok), 11:44 , 19-Май-18, (16) –7 Не считайте других глупее вас Афтара в том числе Очевидно, что ТС нужно удали, Анонм (?), 13:12 , 19-Май-18, (17) –1 людей глупея себя я всегда буду считать глупее себя - увы у меня только один воп, Pahanivo (ok), 22:30 , 19-Май-18, (18) –5 Шо, опять Новый оборот речи - глупея себя Может всё же глупее Хотя нет Име, Аноним (-), 12:28 , 21-Май-18, (24) –1 эко бомбануло, я прямо вижу забрызганный слюнями в хлам монитор Ок Попробую н, Pahanivo (ok), 21:28 , 21-Май-18, (25) –2 Аноним, ты определился , Pahanivo (ok), 10:43 , 24-Май-18, (26) Вообще uniq без sort, но могли бы свой юник переизобрести, напримерwhile read -r, Аноним (28), 19:20 , 10-Июл-18, (28)   b Идея b для большого количества строк данных 1 к исходному файлу добавляем , iklingen (ok), 21:16 , 26-Июл-18, (29) +2   // еще один любитель решать задачи без условий , Pahanivo (ok), 10:19 , 27-Июл-18, (30) // В реальности, чаще всего, условия еще более расплывчаты Так что, нормально , iklingen (ok), 20:11 , 27-Июл-18, (31) // В добрый путь Дату только смотреть не забываем , Pahanivo (ok), 23:16 , 28-Июл-18, (32) 1,6,28,29

Сообщения

[Сортировка по времени | RSS]

1. "Помогите удалить повторяющиеся строки"	+/–
Сообщение от михалыч (ok), 13-Май-18, 07:03
> Есть файл, в нём постоянно повторяются строки. Необходимо удалить повторяющиеся строки, > но без сортировки списка. > $ sort file.txt| uniq -u > sort.txt - не подходит, так как > я не хочу сортировать текст. Мне нужно лишь избавиться от повторяющихся > строк. > Заранее благодарю за помощь. Пожалуйста. perl -e 'for(`cat file.txt`){print unless $s{$_}++}' или так perl -e '@u=grep{\!$s{$_}++} `cat file.txt`; print @u' в FreeBSD знак "!" приходится экранировать
Ответить | Правка | Наверх | Cообщить модератору

есть ответы, показать

6. "Помогите удалить повторяющиеся строки"	–9 +/–
Сообщение от Pahanivo (ok), 15-Май-18, 16:04
> Необходимо удалить повторяющиеся строки, но без сортировки списка. > $ sort file.txt| uniq -u > sort.txt - не подходит, так как > я не хочу сортировать текст. Мне нужно лишь избавиться от повторяющихся > строк. юник без сорта предлагали? > cat file 1 2 3 4 5 6 6 7 8 8 9 > cat file | uniq 1 2 3 4 5 6 7 8 9
Ответить | Правка | Наверх | Cообщить модератору

есть ответы, показать

28. "Помогите удалить повторяющиеся строки"	+/–
Сообщение от Аноним (28), 10-Июл-18, 19:20
Вообще uniq без sort, но могли бы свой юник переизобрести, например while read -r l ; do [ "$l" != "$p" ] && echo "$l" ; p="$l" ; done
Ответить | Правка | Наверх | Cообщить модератору

29. "Помогите удалить повторяющиеся строки"	+2 +/–
Сообщение от iklingen (ok), 26-Июл-18, 21:16
Идея для большого количества строк данных: 1) к исходному файлу добавляем нумерацию строк (индексы) как некоторое поле, например в первых нескольких позициях: $cat file 7 5 2 7 2 0 3 1 2 3 4 5 0 8 4 2 $cat -n file      1    7      2    5      3    2      4    7      5    2      6    0      7    3      8    1      9    2     10    3     11    4     12    5     13    0     14    8     15    4     16    2 2) сортируем по данным с удалением дублей: $cat -n file | sort -u -k 2      6    0      8    1      3    2      7    3     11    4      2    5      1    7     14    8 3) теперь сортируем по номерам строк/индексам: $cat -n file | sort -u -k 2 | sort -n      1    7      2    5      3    2      6    0      7    3      8    1     11    4     14    8 4) и убираем индексы: $cat -n file | sort -u -k 2 | sort -n | cut -f2 7 5 2 0 3 1 4 8
Ответить | Правка | Наверх | Cообщить модератору

есть ответы, показать

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема