forum.opennet.ru

"Google открыл код AI-системы Magika для определения типа содержимого файлов"

Форум Разговоры, обсуждение новостей
Версия для распечатки	Пред. тема \| След. тема

Исходное сообщение

[ Отслеживать ]

Присылайте удачные настройки в раздел примеров файлов конфигурации на WIKI.opennet.ru.

"Google открыл код AI-системы Magika для определения типа содержимого файлов"	+/–
Сообщение от opennews (??), 16-Фев-24, 10:45
Компания Google объявила об открытии кода проекта Magika, предназначенного для определения типа содержимого на основе анализа имеющихся в файле данных. Magika может точно определять в содержимом используемые языки программирования, методы сжатия, установочные пакеты, исполняемый код, виды разметки, форматы звука, видео, документов и изображений. Связанный с проектом инструментарий и готовая модель машинного обучения опубликованы под лицензией Apache 2.0... Подробнее: https://www.opennet.ru/opennews/art.shtml?num=60611
Ответить \| Правка \| Cообщить модератору

Оглавление

Google открыл код AI-системы Magika для определения типа содержимого файлов, opennews, 16-Фев-24, 10:45 [смотреть все]

Это как раз та область где просто нужна база магических слов примерно как и MIM, Аноним, 16-Фев-24, 10:45 (1) //
- каких еще слов Вроде в конце имени файла есть расширение которое , test, 16-Фев-24, 11:47 (59) //
  - Которое не всегда есть и не всегда однозначно Вот, например, txt - это и прост, Аноним, 16-Фев-24, 13:34 (93) //
    - Как будтто mc файл это не текст , test, 16-Фев-24, 15:13 (110)
  - Т е что конвертнуть pdf-книгу в фильм надо просто переименовать файл в m4v Ну , чатжпт, 16-Фев-24, 15:05 (108) //
    - Это тут причем Не давай расширения от балды и все будет нормально , test, 16-Фев-24, 15:14 (111)
      - Внезапно, но изменение расширения может сделать зловред или хакер И что тогда б, Другой анон, 16-Фев-24, 19:24 (155)
        
        Заранее голову включать Но топик новости хороший как упражнение с AI и пример ис, Аноним, 17-Фев-24, 00:40 (170)
        И что Это в какой нибудь винде и в линухе с каким нибудь ДЕ это может и повлия, Sergey, 17-Фев-24, 09:46 (173)
      - ты с Дос на Вин3 11 уже обновился или еще нет , чатжпт, 16-Фев-24, 20:56 (163)
    - А чтобы сделать перевод на иностранный язык - просто заменить буквы А разве нет, Аноним, 16-Фев-24, 17:17 (129)
    - Бухгалтеры год за годом так и делают , Аноним, 16-Фев-24, 22:25 (165)
  - Т е что конвертнуть pdf-книгу в фильм надо просто переименовать файл в m4v Ну , чатжпт, 16-Фев-24, 15:10 (109)
  - Всегда было интересно, зачем люди, ничего кроме винды не видевшие, ходят сюда , Аноним, 16-Фев-24, 15:22 (113) //
    - Последние версии винды, кстати, точно уже не на одно расширение смотрят, а спосо, Qq, 16-Фев-24, 16:38 (127)
      - Я понимаю что сегодняшнии мощностей компьютеров девать некуда Покажи хоть один д, Sergey, 16-Фев-24, 17:19 (132)
      - Заголовок ещё в DOS учитывался От переименования COM в EXE и наоборот система в, Аноним, 16-Фев-24, 17:27 (134)
- Ну почему, для фильтрации писем - самое то , Пряник, 16-Фев-24, 12:15 (71)
- Иногда, лучше жевать - чем говорить echo Hello woodpecker test txt ra, anonymos, 16-Фев-24, 12:57 (81) //
  - Иногда лучше начать с изучения пунктуации , timur.davletshin, 16-Фев-24, 13:10 (83)
  - Архивируешь в Линуксе RAR ом Фууу фиии Есть же открытый 7zip , Аноним, 16-Фев-24, 13:41 (94) //
    - Винрар столь данных с тебя собирает при приобретении разрешения, что чисто из чу, Аноним, 16-Фев-24, 14:28 (106)
    - если зреть в корень, то в рар5 формате есть поддержка unix атрибутов файлов, неп, pfg21, 16-Фев-24, 15:48 (120)
      - tar 7z, Аноним, 16-Фев-24, 16:33 (126)
        
        не смеши мои тапочки использования в качестве сериалиазотора файлов утилиты п, pfg21, 16-Фев-24, 17:26 (133)
        
        Дык эта С tar есть на всём что хоть как то проходило рядом с unix , _, 16-Фев-24, 20:12 (159)
        
        ага, это единственный его плюс, всё остальное - минусы поддержка есть в куче с, pfg21, 19-Фев-24, 18:44 (193)
        
        7z - это и архиватор, и компрессор использовать в добавку tar не надо Или это , Аноним, 18-Фев-24, 16:49 (191)
        
        Если хотеть архиватор, сохраняющий больше метаданных, чем 7-zip, то не шутка Ес, Аноним, 18-Фев-24, 19:33 (192)
      - p7zip stores posix attributes in high 16 bits and adds 0x8000 as marker , Аноним, 17-Фев-24, 19:40 (182)
    - Пока в 7zip не будет информации для восстановления, рару замены нет , Аноним, 16-Фев-24, 17:28 (135)
      - MultiPar правильно воспринимает par2, прицепленные к архивам и цеплять умеет , Аноним, 17-Фев-24, 19:43 (183)
        
        Ничуть не сомневался, что какой-нибудь костылинг предложат , Аноним, 17-Фев-24, 22:27 (189)
        
        Всегда пожалста У par2 есть свои плюсы - открытый формат, множество реализаций, , Аноним, 17-Фев-24, 22:51 (190)
        
        и практически нулевая распространенность да и с развитием par херово, для исп, pfg21, 19-Фев-24, 18:46 (194)
- В тексте же прямо написано, что магические слова на 50 чаще ошибаются, и что им, Аноним, 16-Фев-24, 18:52 (153)
- Trid это вот и делает Причем много-много лет как, так что такое вот достижение , Kuromi, 16-Фев-24, 20:26 (161)
binwalk отдыхает , Alladin, 16-Фев-24, 10:45 (3) //
- binwalk хорош тем, что показывает структуру бинарника, с адресами где какие данн, EuPhobos, 16-Фев-24, 11:28 (45) //
  - А классные у вас там на алиэкспрессе сидиромы то , Аноним, 16-Фев-24, 14:13 (105)
  - Неплохой результат Нейронки вообще крайне полезная вещь, но иногда её пихают не, похнапоха., 16-Фев-24, 15:22 (114) //
    - удивительно зачем нейронка там, где нужен только датчик ускорения и таймер и , fidoman, 17-Фев-24, 13:57 (176)
У ibmagic емнип под сотни мс на каждый файл выходило, так что 5-6 мс не так уж, Аноним, 16-Фев-24, 10:47 (6) //
- Но это 5-6 мс нейронки А это не то же самое что 5-6 мс алгоритма Тут надо смотр, Аноним, 16-Фев-24, 17:44 (140) //
  - ананим фантазирует , амоним, 16-Фев-24, 19:30 (156)
- Нужно сравнение всех инструментов Сколько сигнатур умеет file Тут заявлено 161, fuggy, 16-Фев-24, 23:06 (166) //
  - Сложно сказать, но вроде не так и много Многие файлы не распознаёт, опять же д, Аноним, 16-Фев-24, 23:21 (168)
Подавляющему большинству не нужно проверять мульёны файлов с сек Оно хоть лучше , pelmaniac, 16-Фев-24, 10:48 (8) //
- Ну вот открываешь ты файловый менеджер 8230 А, нет, вот открывает подавляющее , Аноним, 16-Фев-24, 10:53 (14) //
  - Говорят, есть утерянная технология древней цивилизации, называется расширение ,, Уть, 16-Фев-24, 10:59 (19) //
    - Так это только в досе было и в некоторой мере в венде, тогда просто не было вари, Аноним, 16-Фев-24, 11:03 (21)
      - До сих пор такое с завидной регулярностью встречается , Аноним, 16-Фев-24, 11:23 (35)
        
        В Линукс , Аноним, 16-Фев-24, 14:29 (107)
        
        Картинки из интернета , Аноним, 16-Фев-24, 17:32 (136)
      - Звучит как назло виндоводам отморожу уши Ты хочешь прикрутить ИИ для того, чт, Аноним, 17-Фев-24, 20:34 (185)
        
        Я очень сомневаюсь, что любой ИИ в принципе справится с этой задачей без извлече, Аноним, 17-Фев-24, 21:13 (186)
        
        Ну да, полезны Они хотя бы их не удаляют со словами сегодня уже как-то неактуа, Аноним, 17-Фев-24, 22:00 (188)
    - Сейчас система сама определяет что ты и как открываешь пример тот же мак , Аноним, 16-Фев-24, 11:11 (26)
    - Отчёт doc exe, да, молодость 8230 , Аноним, 16-Фев-24, 11:23 (37)
    - А теперь представь десяток тысяч файлов, вытащенных с поломанной файловой систе, Аноним, 16-Фев-24, 11:25 (38)
      - Для десятков тысяч файлов нужно использовать нормальные ФС, и нормальные сторадж, похнапоха., 16-Фев-24, 15:46 (119)
        
        А теперь добро пожаловать в реальную жизнь А ещё кроме побитых ФС встречаются п, Аноним, 16-Фев-24, 17:33 (137)
        
        Добро пожаловать в клуб экстрасенсов, которые предскажут данные по 0 исходных , Аноним, 16-Фев-24, 17:47 (143)
        
        Вот для создания удобного инструмента такая библиотека очень и пригодится , Аноним, 16-Фев-24, 19:32 (157)
    - Времена изменились, больше расширению доверять нельзя Вернее можно, но нельзя ч, Qq, 16-Фев-24, 16:41 (128)
      - А ещё некоторые забывают, что под одним расширением могут скрываться совершенно , Аноним, 16-Фев-24, 20:31 (162)
- Подавляющему большинству оно вообще не нужно А это для того, кому нужно , Аноним, 16-Фев-24, 11:27 (42)
а я, старый, file пользуюсь, 12yoexpert, 16-Фев-24, 10:57 (18) //
- Даже старый ДОСовский FA был лучше, чем file , Аноним, 16-Фев-24, 11:21 (34) //
  - Количество типов файлов несравнимо , Аноним, 16-Фев-24, 13:17 (87)
- Ха, тут ещё про TrID можно вспомнить , Вован, 16-Фев-24, 13:50 (95)
А теперь любое ПО можно AI-системой называть , garrick, 16-Фев-24, 11:00 (20) //
- Претренированная модель звучит не так красиво, а так ml в различных представлени, Аноним, 16-Фев-24, 11:10 (25)
Очень хорошая вешь, давно хотел сам такую работу сделать Но у меня ни дейтасето, Аноним, 16-Фев-24, 11:09 (24) //
- Ни применения потому что ты итак знаешь что и как открывать, естественным интелл, Аноним, 16-Фев-24, 11:13 (27) //
  - Мне для других целей И по-видимому вообще другое Подробности плана знают немно, Аноним, 16-Фев-24, 11:23 (36) //
    - Что значит вместо меня Судя по вашему комментарию, вы это делать не собираете, Аноним, 16-Фев-24, 13:00 (82)
      - Ну собираюсь, но когда-нибудь, когда необходимые ресурсы, знание и финансировани, Аноним, 16-Фев-24, 13:12 (85)
        
        Лучше подумай, как сделать дешевле Круче никому не интересно, надо эффективнее , Аноним, 16-Фев-24, 13:19 (89)
        
        То, что я хочу сделать, для моего применения и есть эффективнее , Аноним, 16-Фев-24, 13:30 (90)
        
        Ну, если только твоего - тогда тебе это и оплачивать, очевидно , Аноним, 16-Фев-24, 15:49 (121)
    - Заходит изобретатель в бар и говорит Знаете, у меня есть гениальная идея, но я в, Аноним, 16-Фев-24, 17:49 (145)
Подсунул бинарь с float-ами, а оно его вообще никак не распознало - размазало по, Аноним, 16-Фев-24, 11:19 (30) //
- ты б ещё бинарь с байтами подсунул, 12yoexpert, 16-Фев-24, 11:20 (33) //
  - А если с битами , Аноним, 16-Фев-24, 11:26 (39) //
    - Распознал бы как бейсбольные_биты jpg, Аноним, 16-Фев-24, 13:51 (96)
      - У них в ассортименте вроде только пожарные гидранты, школьные автобусы, переходы, Аноним, 16-Фев-24, 15:40 (116)
        
        Ну вообще то ещё светофоры бывают и иногда легковушки Грузовиков вот тоже не ви, Аноним, 17-Фев-24, 18:04 (181)
Они там совсем крышей поехали со своими Poetry и venvами Впрочем, для гуглага , Аноним, 16-Фев-24, 11:20 (32) //
- А как ты управляешь virtualenv ами Вручную , Пряник, 16-Фев-24, 12:17 (72) //
  - Я говно не кушаю venv использую только для тестирования бутстрапа своего пакетн, Аноним, 16-Фев-24, 12:32 (78) //
    - quote для тестирования бутстрапа своего велосипеда quote я поправил, Пряник, 16-Фев-24, 13:19 (88)
      - Любой де-факто стандарт был когда-то велосипедом , Аноним, 16-Фев-24, 13:31 (91)
- Он художник W, он поэт, он так видит Хотя реально за ли господа из гуглы тяну, Аноним, 16-Фев-24, 15:42 (117) //
  - poetry - это не поделка гугла Это хипстерская система пакетирования, используем, Аноним, 16-Фев-24, 18:19 (148)
- Не выпендривались бы и сделали на мейкфайлах, чтобы анониму было удобно , Аноним, 16-Фев-24, 19:50 (158)
Вероятно эта штука нужна для того, чтобы гугл сканировал файлы на гугл-дисках по, Аноним, 16-Фев-24, 11:27 (40) //
- да, искать незаконное они умеютhttp opennet ru opennews art shtml num 56574, Аноним, 16-Фев-24, 11:35 (52) //
  - ну так вот вам и ответ, как они это там нашли Причем поскольку жаловаться некуда, похъ, 17-Фев-24, 20:20 (184)
- Незаконное их если и волнует, то в последнюю очередь , Аноним, 16-Фев-24, 11:40 (56)
Ещё один признак поехатости Какие-то придурки придумали хранить переменные окр, Аноним, 16-Фев-24, 11:33 (49) //
- У виндузятников нет механизмов ОС , Аноним, 16-Фев-24, 11:41 (57) //
  - А это что , Аноним, 16-Фев-24, 11:58 (65)
  - Читать документацию, похоже, умеют одни виндузятники Чтобы программно добавить и, n00by, 16-Фев-24, 12:14 (70) //
    - Виндовс очень дружественная к пользователям система, кули , Аноним, 16-Фев-24, 15:44 (118)
      - Рулить переменными окружения через гуй ещё начиная с XP можно , Аноним, 16-Фев-24, 17:35 (138)
      - Значит надо было набросить монструозный механизм ОС , а не исходную ересь , n00by, 17-Фев-24, 10:17 (174)
- Какого ты плохого мнения об авторах Bash Зачем они хранят переменные окружения , Пряник, 16-Фев-24, 12:18 (73) //
  - bashrc - ъто стандартный способ, env - это васяноподелка , Аноним, 16-Фев-24, 12:31 (77) //
    - Очень стандартно, а если у меня оболочка нестандартная Zsh тоже оттуда читать б, Аноним, 16-Фев-24, 17:36 (139)
      - кажется был ещё какой-то файлик, но я добавляю в bashrc zsh не имеет смысла без, Аноним, 16-Фев-24, 18:21 (149)
Кто-то либо не умеет в импорт через точку, либо не осилил DRY-принцип , Аноним, 16-Фев-24, 11:34 (51)
Также кто-то не научился правильно пользоваться from import, Аноним, 16-Фев-24, 11:36 (54)
Они там долбанулись в БИБЛИОТЕКЕ для использования в программах использовать TQD, Аноним, 16-Фев-24, 11:43 (58) //
- Надо было Rich сразу импортировать У него звёзд в гитхабе больше , Пряник, 16-Фев-24, 12:20 (74)
Кто-то не умеет в mmap , Аноним, 16-Фев-24, 11:48 (60) //
- Питонисты никогда не умели в posix api Поэтому все эти supervisord, celery и os, Аноним, 16-Фев-24, 17:46 (142) //
  - это не posix api, а кроссплатформенное просто имя совпадает , Аноним, 16-Фев-24, 18:22 (150)
Файлы ресурсов из игр сабж может потрошить Почти у каждого такого файла своя не, Аноним, 16-Фев-24, 11:49 (61) //
- Нет, не умеет Извлекаются блоки байтов из начала файла, конца файла и середины , Аноним, 16-Фев-24, 11:55 (63)
Что-то мне сдаётся, что для этой задачи AI - абсолютный оверинжиниринг Неуж-то , Анонист, 16-Фев-24, 12:03 (66) //
- Для моей задачи ИИ никак не оверинжиниринг, а вообще единственный вариант , Аноним, 16-Фев-24, 12:08 (67) //
  - Если бы сейчас не было распространения нейросетей, а ваша задача стояла, то как , Аноним, 16-Фев-24, 13:53 (100) //
    - Делал бы как и раньше, и как и сейчас делаю , Аноним, 16-Фев-24, 13:56 (103)
      - Дедам годилось, и нам сгодится , Аноним, 16-Фев-24, 17:45 (141)
        
        нет, не сгодится, к сожалению , Аноним, 16-Фев-24, 18:23 (151)
- Типов файлов очень много - врукопашную умаешься правила на все писать И каждый г, Quad Romb, 16-Фев-24, 14:00 (104)
Как всегда в репертуаре гугла 8212 ради нескольких свистоперделок требуется о, Аноним, 16-Фев-24, 12:11 (69) //
- Слазь уже со второй версии 128514 , Пряник, 16-Фев-24, 12:22 (75) //
  - Я никогда не сидел на второй версии и мой софт её никогда не поддерживал , Аноним, 16-Фев-24, 12:35 (80)
- Вполне законно, никто не будет писать на доисторической версии по своей воле Те, Аноним, 16-Фев-24, 13:33 (92) //
  - Да там и по остальным признакам видно, что авторы халтурят , Аноним, 16-Фев-24, 13:54 (102) //
    - Вроде, ничего криминального Ну poetry с ruff и всё остальное вряд ли, но имеют , Аноним, 16-Фев-24, 15:17 (112)
      - если выкинуть ненужные свистоперделки, то и на более ранних пойдёт , Аноним, 16-Фев-24, 18:25 (152)
        
        Более ранние, чем 3 8 Ты сейчас серьёзно Это абсолютный минимум во всех проект, Аноним, 16-Фев-24, 19:01 (154)
Зачем это на VirusTotal Гугл хочет решать, кто из вендоров получит образец , n00by, 16-Фев-24, 12:30 (76)
Посмотрел список 116 типов данных по ссылке какой-то особой экзотики не броси, Аноним, 16-Фев-24, 13:14 (86)
Лучшее расширение для гуглопчты или драйва 8212 это зашифрованный архив tar gp, Вы забыли заполнить поле Name, 16-Фев-24, 15:26 (115)
Радует, что новый питонячий код с аннотациями типов пишут , Вы забыли заполнить поле Name, 16-Фев-24, 17:18 (131) //
- Что радует, то, что в number теперь можно сунуть string или то, что в питоне про, Аноним, 16-Фев-24, 17:48 (144) //
  - Так написал, будто это что-то плохое, Аноним, 16-Фев-24, 23:07 (167)
  - Что популярность указания типов в питоне станоавится таким же как в typescript , Вы забыли заполнить поле Name, 16-Фев-24, 23:32 (169)
  - Учитывая, что даже AI иногда чушь порет, типизация - добро всё ещё Ибо блокируе, Аноним, 17-Фев-24, 00:44 (171)
- Питон испольняется на виртуальной машине Вопрос, зачем интерпретируемому языку , Аноним, 17-Фев-24, 07:43 (172) //
  - Типы облегчают тестирование и сопровождение кода То есть, они нужны человеку, а, Аноним, 17-Фев-24, 10:59 (175)
  - 1 Эта информация исользуется и доступна в рантайме dataclasses, pydantic2 Тип, Вы забыли заполнить поле Name, 17-Фев-24, 21:51 (187)
  - Языку программирования ничего не нужно, он же памятник с Объяснять зачем ну, Аноним, 21-Фев-24, 20:00 (195)

Форумы | Темы | Пред. тема | След. тема

Партнёры:

Хостинг:

Закладки на сайте
Проследить за страницей

Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру