NoneUniq is a Unix/POSIX/Linux utility to remove or filter duplicate lines from a sorted file. It is also the name of a method to remove duplicates from an array in Ruby.
1 ответ

Как убрать начальные пробелы вывода из команды "uniq"?

[root@firstcentos scripts]# cat test1 00 00 01 01 00 00 02 02 03 aa aa aa [root@firstcentos scripts]# cat test1 | uniq -c 2 00 2 01 2 00 2 02 1 03 3 aa [root@firstcentos scripts]#
27 мар '16 в 21:06
4 ответа

Почему Uniq не работает с этим большим файлом? удар

Мне очень жаль за этот другой вопрос, но я не могу понять, что здесь происходит. Я хочу вычислить частоту слов из файла, где слова расположены по одной строке. Файл действительно большой, так что это может быть проблемой (в этом примере он насчитыва…
08 авг '12 в 08:20
0 ответов

Удалите уникальные элементы и оставьте все NONunique в списке

Помогите решить проблему У нас есть непустой список целых чисел, и мы должны возвращать список, состоящий только из неуникальных элементов в этом списке (не меняйте порядок элементов). Лучший способ - удалить или удалить все уникальные элементы. При…
11 ноя '14 в 18:32
1 ответ

Получить размер и другую информацию с помощью команды "du"

Я делаю небольшой скрипт на bash, который показывает общий размер в мегабайтах, количество файлов, номер папки и имя папки. У меня есть почти все, кроме размера в мб du -a -h | cut -d/ -f2 | sort | uniq -c Это показывает что-то вроде этого: 4 01 fol…
09 дек '13 в 07:32
1 ответ

Как я могу определить уникальность каждой строки после определенного символа?

У меня есть список адресов электронной почты, как это: name_1@domain.com name_2@domain.com name_1@domain_2.com name_1@domain_3.com name_2@domain_3.com name_1@domain_4.com Как я могу удалить все дубликаты электронных писем в зависимости от домена? По…
15 авг '15 в 22:23
3 ответа

Bash вывести строку с наибольшим значением

Мой вопрос очень похож на этот, но с одним отличием; я хочу вывод строки, которая имеет самый высокий балл на 3-й вкладке. мои данные как: 1.gui Qxx 16 2.gui Qxy 23 3.guT QWS 11 и я хочу получить это: 1.gui Qxy 23 3.guT QWS 11 Я использовал: cat fil…
27 ноя '12 в 09:36
3 ответа

Как вы делаете пользовательское форматирование с опцией uniq -c?

Из википедии: uniq -c Generate an output report in default style except that each line is preceded by a count of the number of times it occurred. If this option is specified, the -u and -d options are ignored if either or both are also present. На м…
20 янв '12 в 23:04
2 ответа

uniq -c не может считать уникальные строки

Я пытаюсь подсчитать уникальные вхождения чисел в 3-м столбце текстового файла, очень простая команда: awk 'BEGIN {FS = "\t"}; {print $3}' bisulfite_seq_set0_v_set1.tsv | uniq -c который должен сказать что-то вроде 1 10103 2 2093 3 109 но вместо это…
29 дек '15 в 18:03
4 ответа

Создание уникального массива perl

В настоящее время у меня очень простая проблема с получением результата от команды оболочки с обратным тактом. Я извиняюсь, что проблема довольно проста. У меня есть отсортированный массив (@valid_runs), который, как я знаю, содержит последовательны…
03 авг '12 в 18:46
2 ответа

Печать строк, содержащих строку только один раз

Например, это мой файл называется Weapons: Sword of Dragons Staff of Fire Bow of Noxious Staff of Light Bow of Noxious Я хочу ввести команду, которая будет отображать строки, содержащие Bow только однажды. Вот что я попробовал: grep -n "Bow" Weapons…
27 фев '15 в 14:59
3 ответа

Найти файл с наибольшим алфавитным символом в расширении файла

Как найти файл с наивысшим алфавитным символом в расширении файла? Пример файлов, которые создает мое приложение: $ find . -name 'L_*.[J-Z]' L_58420.K L_58420.J L_58420.M L_46657.J L_58420.N L_58420.P L_46657.N L_58420.Q L_46657.K L_58420.O L_46657.…
19 мар '18 в 22:04
1 ответ

Linux: удалить дубликаты строки

У меня есть файл TXT. Я хотел бы удалить все повторяющиеся строки. Я пробовал это, но не сработало sort -ur file.txt или же uniq -D -f 2 file.txt file.txt 34.78.54.21 websrv1 nameweb 34.78.54.21 nameweb Мне просто нужна одна строка
02 май '17 в 09:57
1 ответ

Как проверить папку с текстовыми файлами на наличие дубликатов URL

У меня есть папка с *.txt файлы. Я хочу регулярно проверять эти файлы на наличие дубликатов URL. На самом деле, я сохраняю свои закладки в этих файлах, всегда с как минимум двумя строками, такими как: www.domain.com Quite a popular domain name Как э…
10 апр '14 в 11:04
1 ответ

Запретить хотлинкинг / доступ к файлам mp4

У меня есть веб-сайт, созданный на PHP, где я играю файлы mp4 через флеш-плеер или html5-плеер. Недавно я увидел, что мои файлы тоже есть на других сайтах, и это стоило мне пропускной способности. Я использую httpd / apache на удаленном хосте, где х…
24 фев '13 в 03:04
3 ответа

Чтобы найти повторяющиеся совпадения по `uniq -d`

Мои данные как /tmp/1 9367543 9105616 9108177 8948074 8860323 9170406 9105616 Я бегаю и ничего не получаю cat /tmp/1 | uniq -d Это странно, так как uniq -d должен -d Only output lines that are repeated in the input. Как вы можете использовать uniq -…
25 июл '09 в 11:20
4 ответа

Удаление повторяющихся строк из строк в файле

Я пытаюсь удалить дубликаты строк внутри строк в файле. Я попытался использовать uniq, однако это работает только для удаления повторяющихся строк, а не повторяющихся строк в строках. Я забочусь только о "словах" после знака "=" и о том, что "слова"…
01 сен '16 в 19:22
2 ответа

Как вставить Uniqid() в JavaScript

Я пытаюсь связать uniqid() для onclick событие в строке: $UniquepreID = uniqid(); $selectbutton = '<input type="button" value="testabc" onclick="selectElementContents( document.getElementById("$UniquepreID") );" />'; $UniquepreID разбирается б…
08 дек '15 в 13:30
1 ответ

Ошибка "Недопустимая последовательность байтов" при использовании команд оболочки в терминале Mac Bash

Ошибка "Недопустимая последовательность байтов" при попытке извлечь неанглийские символы из большого файла в оболочке MacOS. Это сценарий, который я пытаюсь использовать: sed 's/[][a-z,0-9,A-Z,!@#\$%^&*(){}":/_-|. -][\;''=?]*//g' < $1 >Abh…
23 сен '13 в 07:17
1 ответ

Ошибка Postgresql при использовании uniq метода Rails

У меня есть Item модель, которая принадлежит Product модель. Product имеет properties колонка типа hstore. Я хочу вернуть набор уникальных items которые принадлежат продукту и не включают текущий элемент: @item.similar_items class Item < ActiveRe…
03 май '13 в 14:40
2 ответа

Как удалить повторяющиеся строки в файле...AWK, SED, UNIQ не работает на моем файле

Я нахожу много способов сделать это, AWK, SED, UNIQ, но никто из них не работает над моим файлом. Я хочу удалить дубликаты строк. Вот пример части моего файла: KTBX KFSO KCLK KTBX KFSO KCLK PAJZ PAJZ ПРИМЕЧАНИЕ: мне пришлось вручную добавлять перево…
26 сен '13 в 21:28