Возможности Amazon Athena
Amazon Athena – интерактивный сервис запросов, позволяющий без труда анализировать данные непосредственно в Amazon S3 стандартными средствами SQL. Всего за несколько щелчков мышью в Консоли управления AWS пользователи могут указать расположение данных в S3, начать выполнять интерактивные запросы с помощью стандартных средств SQL и получить результаты за считанные секунды. Athena – это бессерверный сервис, поэтому управлять инфраструктурой не требуется, а плата начисляется только за выполнение запросов. Сервис можно использовать для обработки журналов, выполнения анализа данных и интерактивных запросов к ним. Athena масштабируется автоматически и выполняет запросы параллельно, поэтому результаты возвращаются очень быстро даже при выполнении сложных запросов на больших объемах данных.
Без серверов. Без инфраструктуры. Без администрирования.
Amazon Athena работает без сервера, поэтому управлять инфраструктурой не требуется. Не приходится беспокоиться о настройке, обновлениях ПО, сбоях или масштабировании инфраструктуры при увеличении объемов данных и количества пользователей. Об этом автоматически позаботится Athena, так что можно сконцентрироваться на анализе данных.
Amazon Athena overview (Роман Москаленко)
Простое начало работы
Чтобы начать работу, войдите в консоль Athena, задайте схему с помощью мастера консоли или выражений DDL и начните сразу же выполнять запросы с помощью встроенного редактора запросов. Можно также использовать AWS Glue для автоматического поиска данных в указанных источниках и для заполнения каталога данных информацией о новых или измененных таблицах и определениями разделов.
Результаты отображаются в консоли в течение нескольких секунд и автоматически сохраняются в указанной корзине хранилища S3. Их также можно загрузить на свой компьютер. Для подготовки данных к анализу больше не нужно использовать сложные задания ETL. Таким образом, любой специалист со знанием SQL может быстро проанализировать большой объем данных.
Простое создание запросов с помощью стандартного языка SQL
Amazon Athena использует Presto – ядро обработки распределенных SQL‑запросов с открытым исходным кодом, оптимизированное для выполнения интерактивного анализа данных с низкой задержкой. Это позволяет выполнять запросы к большим наборам данных в Amazon S3, используя ANSI SQL с полной поддержкой масштабных операций объединения, оконных функций и массивов. Athena поддерживает множество форматов данных, таких как CSV, JSON, ORC, Avro или Parquet. Коннекторы федеративных источников данных Athena дают возможность отправлять запросы к дополнительным источникам данных и объединять полученные данные с данными, хранящимися в Amazon S3. Вы можете обращаться к Athena и выполнять запросы из консоли Athena, с помощью API, интерфейса командной строки, AWS SDK и поддерживаемых приложений разработки бизнес-аналитики и SQL посредством драйверов Athena для JDBC и ODBC.
Плата за запросы
В Amazon Athena оплате подлежат только выполненные запросы. Плата начисляется за объем данных, обработанных при выполнении каждого запроса. Чтобы увеличить производительность и значительно сократить стоимость запросов, можно сжать данные, разбить их на разделы или преобразовать в табличный формат. Такие операции сокращают объем данных, обрабатываемых для выполнения запроса.
Анализ логов AWS CloudFront в Amazon Athena.
Высокая производительность
С Amazon Athena не нужно беспокоиться об управлении кластерами и их настройке. Athena оптимизирован для быстрой и производительной работы с Amazon S3. Запросы автоматически выполняются параллельно, поэтому даже на больших объемах данных результаты готовы за несколько секунд.
Высокая доступность и надежность
Amazon Athena обеспечивает высокую доступность, выполняя запросы с помощью вычислительных ресурсов, распределенных между несколькими объектами, и автоматической маршрутизации запросов в случае недоступности определенных объектов. В качестве основного хранилища Athena использует Amazon S3, что гарантирует высокую доступность и надежность данных. Устойчивая инфраструктура Amazon S3 обеспечивает надежное хранение 99,999999999 % объектов. Резервные копии данных распределяются между несколькими объектами и несколькими устройствами на каждом объекте.
Безопасность
В Amazon Athena можно управлять доступом к данным с помощью политик AWS Identity and Access Management (IAM), списков контроля доступа или политик использования корзин Amazon S3. Благодаря политикам IAM можно предоставлять пользователям IAM средства точного управления корзинами S3. Контролируя доступ к данным в S3, можно запретить пользователям отправлять запросы к этому хранилищу через Athena. Athena также позволяет просто выполнять запросы к зашифрованным данным, хранящимся в Amazon S3, и записывать зашифрованные результаты обратно в корзину S3. Поддерживается как шифрование на стороне сервера, так и шифрование на стороне клиента.
Интеграция
В сервисе Amazon Athena предусмотрена встроенная интеграция с AWS Glue. Каталог данных AWS Glue позволяет создавать единый репозиторий метаданных для различных сервисов, сканировать источники данных для обнаружения схем, наполнять каталог новыми или измененными таблицами и определениями разделов, а также обеспечивать поддержку различных версий для схем. Кроме того, полностью управляемые инструменты ETL сервиса AWS Glue позволяют обрабатывать данные и преобразовывать их в табличный формат для оптимизации производительности запросов и снижения их стоимости. Подробнее об AWS Glue.
Федеративный запрос
Athena предоставляет коннекторы для корпоративных источников данных, в том числе Amazon DynamoDB, Amazon Redshift, Amazon OpenSearch, MySQL, PostgreSQL, Redis и других популярных сторонних хранилищ данных. Коннекторы данных Athena дают возможность генерировать аналитическую информацию из множества источников данных с помощью удобного синтаксиса Athena для SQL и без необходимости в перемещении данных с использованием сценариев ETL. Коннекторы данных работают как функции AWS Lambda, и к ним можно предоставлять доступ нескольким аккаунтам, что позволяет масштабировать запросы SQL до сотен конечных пользователей. Список поддерживаемых источников приведен в разделе «Использование коннекторов источников данных Athena», а информация о том, как создать собственный коннектор источника данных – в SDK коннекторов Athena.
Машинное обучение
Можно запускать модели SageMaker Machine Learning с помощью запросов SQL Athena для получения логических выводов. Благодаря возможности использовать модели ML в запросах SQL теперь достаточно написать запрос для выполнения сложных задач, таких как обнаружение отклонений, анализ категорий клиентов и прогнозирование продаж. Любой, у кого есть опыт работы с SQL, может без труда запускать с помощью Athena модели ML, развернутые в Amazon SageMaker.
Подробнее о ценах на Amazon Athena
Ознакомиться со всеми предлагаемыми вариантами цен на Amazon Athena.
Зарегистрировать бесплатный аккаунт
Получите мгновенный доступ к уровню бесплатного пользования AWS.
Начать разработку в консоли
Начните разработку с помощью Amazon Athena в Консоли управления AWS.
Источник: aws.amazon.com
Что такое Project Athena от Intel? Подробный разбор.
В ходе прошедшей в Москве пресс-конференции представитель компании Intel рассказал о том, что собой представляет программа Project Athena. Все точки над буквой «i» мы расставим в данном материале.
27 октября 2019, воскресенье 00:48
Kutuz [ ] для раздела Блоги
3070 Ti Gigabyte Gaming за 56 тр
-22000р на 4080 Gigabyte Gaming
i5 13600K 14 ядер — дешевле и быстрее i7 12700K
ASUS 3050 все еще дешевле 30 тр
24 ядерный 13900K — смотри цену
За пост начислено вознаграждение
В ходе прошедшей в Москве пресс-конференции представитель компании Intel Владислав Никонов рассказал о том, что собой представляет программа Project Athena (проект «Афина»). Многие наверняка хотя бы раз где-то что-то про это слышали, но не имеют четкого представления, о чем конкретно идет речь. Все точки над буквой «i» мы расставим в данном материале.
реклама
Если совсем уж коротко и в двух словах, то Project Athena — аппаратная платформа и набор требований компаний Intel к характеристикам компактных и производительных ноутбуков класса ультрабук, выдвигаемых для соответствия данной спецификации. А теперь более подробно и по порядку.
рекомендации
i7 13700KF 16 ядер — цена рухнула
3070 за 49 тр в Ситилинке
5 видов 4090 в Ситилинке по норм ценам
MSI 3050 за 28 тр в Ситилинке
Компьютеры от 10 тр в Ситилинке
13900K в Регарде по СТАРОМУ курсу 62
RTX 4080 — 6 видов в Регарде
Упала цена Ryzen 7600 4.7ГГц
Новый 13700K и KF дешево в Регарде
13600K очень дешево в Регарде
Ярким примером подобной аппаратной платформы является Intel Centrino. Те, кто был знаком с миром ПК 2000-х годов наверняка помнят такое словосочетание. Тогда под наклейкой с надписью «Intel Centrino», наклеенной на ноутбук, подразумевалось то, что он построен на мобильном процессоре Intel Pentium M (безусловно, передовом по меркам тех лет), а также использует интеловский чипсет и встроенный модуль Wi-Fi.
Поддержка беспроводного Интернета, кстати, в те далекие годы ещё не была повсеместным явлением на ноутбуках, что делало ноуты на платформе Centrino заведомо чем-то передовым в глазах потребителей. В дальнейшем суть оставалась прежней: использование процессора и чипсета компании Intel, а остальные компоненты системы должны были пройти тестирование на совместимость, что гарантировало оптимальную и стабильную работу всей системы в целом. С тем, что вкладывается в понятие «платформа» (в данном контексте) мы разобрались, а теперь идём дальше.
реклама
var firedYa28 = false; window.addEventListener(‘load’, () => < if(navigator.userAgent.indexOf(«Chrome-Lighthouse») < window.yaContextCb.push(()=>< Ya.Context.AdvManager.render(< renderTo: ‘yandex_rtb_R-A-630193-28’, blockId: ‘R-A-630193-28’ >) >) >, 3000); > > >);
Раз уж речь пошла об ультрабуках, то давайте и этот термин тоже разберем подробней. Что такое ультрабук? Это просто компактный ноутбук? И да и нет. На самом деле, есть более-менее четкий набор параметров, также предложенных Intel, которые позволяют сказать, что данный компактный ноутбук является ультрабуком.
К ним относится малая толщина по отношению к диагонали — тоньше 18 мм при диагонали менее 14 дюймов и тоньше 21 мм при большей диагонали. Быстрая скорость пробуждения (не боле 2 с) и выхода из режима гибернации (не более 7 секунд). Использование процессоров Intel (для всех относительно поздних и актуальных моделей — линейки Intel Core). Возможность автоматически изменять производительность процессора в зависимости от нагрузки, чтобы обеспечить оптимальное время автономной работы. Не смотря на малую толщину и невозможность поместить в габариты большой аккумулятор, она должна быть более 5 часов.
А теперь перейдём к самому главному: каким требованиям будут соответствовать ноутбуки (ультрабуки) на платформе Project Athena?
Общая концепция, в целом, такая же как и у платформы Centrino, отличаются лишь конкретные требования к параметрам и характеристикам, которых стало больше и которые стали соответствовать самым передовым стандартам индустрии уже на сегодняшний день. Например, время пробуждения теперь должно быть менее 1 секунды (по аналогии со смартфонами и планшетами на мобильных ОС), должна поддерживаться авторизация по отпечатку пальцев или лицу пользователя. Так как 5 часов работы без подзарядки — это очень мало по меркам любого современного планшета, а успешно конкурировать с ними хочется, к тому же литий-полимерные аккумуляторы, SSD и умные технологии энергосбережения это позволяют, требования стали более высокими. Не менее 16 часов воспроизведения видео с локального накопителя и более 9 часов активного пользования Интернетом по беспроводному подключению. За полчаса зарядки ноутбук должен заряжаться на столько, чтобы обеспечить не менее 4 часов автономной работы.
реклама
По части комплектующих и производительности мы имеем следующее: использование мобильных процессоров Intel Core i5 и i7, относящихся к 8 и 10 поколению, от 8 ГБ оперативной памяти, при том, двумя модулями, работающими в максимально эффективном двухканальном режиме, от 256 ГБ NVMe SSD (опционально — Intel Optane), наличие порта Thunderbolt 3, Wi-Fi 6 Gig+, опционально — гигабитный LTE модем. Есть намерения в будущем развивать поддержку функций искусственного интеллекта и голосовых помощников, в том числе, исполняемых непосредственно на ноутбуке, а со стороны сервера. Пока перспективы и практические сценарии использования этого, честно говоря, мне представляются несколько размытыми. Вопрос больше в конкретной реализации. Определенные требования предъявляются и к исполнению таких устройств, это стандартный форм фактор или трансформер 2 в 1, сенсорный дисплеи с тонкими рамками диагональю 12-15 дюймов с разрешением Full HD (1920 x 1080) или выше, клавиатура с подсветкой, точная сенсорная панель и поддержка пера.
реклама
А так будет выглядеть стикер, который будут клеить на ноутбуки, созданные в соответствии со спецификациями Project Athena. На российском рынке надпись на нём будет гласить «Создан для мобильной производительности»
За пост начислено вознаграждение
Источник: overclockers.ru
Программа Athena от CAD-PLAN обсуждение
Идеально подходит для международных проектов: ATHENA создает автоматические надписи к своим объектам и способна за одно нажатие кнопки перевести чертеж на любой из 11 доступных языков.
Camper
Гость
Ответ: Программа Athena от CAD-PLAN обсуждение
Блин, никаких отзывов, неужели у нас это такая редкость ?) почитал в инете, столько возможностей у программы, но это все пишут ОНИ, а охота узнать что думаете ВЫ )
Ниже наиболее полная документация всех возможностей программы на русском.
Скрытое содержимое доступно для зарегистрированных пользователей!
Скрытое содержимое доступно для зарегистрированных пользователей!
ivan1
Активный участник
Регистрация 24 Мар 2007
Ответ: Программа Athena от CAD-PLAN обсуждение
Недавно разговаривал с одним Тольттинским обладателем программы Athena. Вообщем смысл свелся к тому: фирма занимается вентилируемыми фасадами и всю проектную работу делала в двух программах Автокаде, Компасс+спец.модуль. Купили Athena начали юзать, но программа оказалась довольно сырой, так что вернулись на старую схему работы. А в рекламных проспектах все так шоколадно.
Если есть замечания по поводу сказанного пишите.
IgorSYS
Гость
Ответ: Программа Athena от CAD-PLAN обсуждение
Работал в конторе, где была лицензионная Антенна. Она не плохо считает стекло на прогиб, строит температурные изополя узлов, а по поводу зимних садов. Трехмеру с двоиными углами создать можно, но КМД делает неудобоваримое и эту трехмеру на переведешь потом в обычную. Резюме — аццтой!
LVV77
Гость
Отзывов мало, потому что очень дорогая. Кто посоветует какую нибудь альтернативу для фасадов и зимних садов?
SkyEng
Гость
Пробовал работать в атене 2004 (под 2004 автокад). Короче отстой. Для двойных углов лучше все таки использовать компас, если обьект сложный, а если простой — то автокад и рассчет углов вручную
Tim555
Гость
А может кто знает, где взять инструкцию по пользованию. Хочется разобраться
stuf
Гость
на официальном сайте есть видео ролики по программе, но не так много. Кое что можно и оттуда почерпнуть!
PASHASV
Гость
Также хотелось-бы узнать по поводу инструкции и библиотек. Боюсь, что если писать все это самому то провозиться придется несколько лет.
katarios
Гость
А нет более подробной информации о Компасе+спец.приложении к нему для проектирования навесных фасадов. Или ссылки какой-нибудь, где-более конкретно можно узнать.
Добавлено через 9 минут
И еще, может кто слышал про использование в данной области программы ArhiCAD 12, в описании новых возможностей данной программы упомянут инструмент «Навесные фасадные системы».
stuf
Гость
Появилась Athena 2010.
На официальном сайте можно скачать ATHENA 2010 Тестовая версия.
http://www.cad-plan.com/cms/aeae/Downloads/-/index-a-85.html
Но проблема в том, что даже эту тестовую версию, а точнее архив с ней — запаролили.
Кто сможет помочь открыть этот архив или имеется может дистрибутив уже открытый к 10-й версии?
Tim555
Гость
В сомой програме ест инструкция.
Я видимо туп для нее. :bl: Там думается, что основы то я знаю.
bormaleg
Гость
Кому-то нравится Компас а кому-то Autocad и этот спор бесконечен.
Производительность работы фасадчика увеличивается в разы после переезда на ATHENA. А создание спецификации вообще уникальная функция. Хотя KLAES эту тему развил интереснее.
akva
Гость
Появилась Athena 2010.
На официальном сайте можно скачать ATHENA 2010 Тестовая версия.
QUOTE]
А интересно, какие ограничения на тестовую версию?
evg111
Гость
Ну во первых архив ATHENA2010_trial защищен паролем. После того, как я написал письмо в группу поддержки, я получил такой ответ:
«Добрый день, Евгений.
Для того, чтобы получить тестовую версию Athena, необходимо заполнить и переслать нам заявку и гарантийное письмо (см. вложение). Прошу обратить внимание на пункт 4 гарантийного письма (отправка за мой счет).
После этого, мы сможем выслать Вам usb-ключ и сообщить пароль от архива с программой. Функциональность программы, никак не будет ограничена.» Так что в течении 2-х месяцев можно пользоваться как настоящей, а потом нужно будет вернуть ключик на родину.
Добавлено через 10 минут
А нет более подробной информации о Компасе+спец.приложении к нему для проектирования навесных фасадов. Или ссылки какой-нибудь, где-более конкретно можно узнать.
Добавлено через 9 минут
И еще, может кто слышал про использование в данной области программы ArhiCAD 12, в описании новых возможностей данной программы упомянут инструмент «Навесные фасадные системы».
С помощью инструмента «Навесные фасадные системы» в ArhiCAD 12, ArhiCAD 13, можно лишь прилепить красотулину к стенке, и не более того.
Источник: inoe.name
Athena что это программа
Не успели утихнуть разговоры про шифровальщик WannaCry, который использовал известную АНБ уязвимость, как появилась информация о новой угрозе, разработанной ЦРУ.
На этой неделе сайт WikiLeaks обнародовал подробную информацию об эксплойте, который применялся ЦРУ для взлома всех версий Windows и получения полного контроля над целевой системой.
Проект ЦРУ под кодовым названием Athena позволяет взламывать абсолютно любые версии Windows, начиная от Windows XP и заканчивая Windows 10. В результате атакующее лицо может развертывать на целевые системы другие вредоносные программы, а также получать доступ к локальным файлам.
| В отчете WikiLeaks сообщается “После установки вредоносная программа выполняет функцию маяка, т.е. загружает в память и выгружает из памяти вредоносные модули, а также извлекает файлы из определенных каталогов файловой системы. Угроза позволяет оператору настраивать параметры во время исполнения, что модифицировать выполняемые операции”. |
Это означает, что ЦРУ может получить полный контроль над целевой системой Windows, загружать любые данные со взломанного компьютера и загружать их на своего собственного сервера.
Проект Athena был создан в августе 2015 года, т.е. ЦРУ разработала эксплойт спустя месяц после публичного релиза Windows 10.
Обход антивирусов
Вредоносная программа разрабатывалась не собственными силами ЦРУ, а стала результатом сотрудничества с американской компанией Siege Technologies, которая позиционируется как организация, специализирующаяся на “наступательных технологиях кибервойны”.
Первоначально Athena создавалась с расчетом обхода антивирусных систем. Интересно, что документация ЦРУ содержит упоминания о популярных антивирусных решениях, которые согласно информации агентства, не способны заблокировать эксплойт.
| В руководстве Athena отмечается: “При установке происходит взлом службы DNS Cache. В Windows 7 и 8 эта служба работает по умолчанию работает в процессе svchost.exe (netsvcs), а в Windows 10 служба известная как NetworkService. Контекст пользователя NetworkService позволяет снизить меры безопасности системы. Реализация srvhost позволяет запускать службу в контексте netsvcs при следующей перезагрузке. Чтобы обойти данный недостаток и обеспечить немедленное выполнение после установки, существующая служба будет запускаться как NetworkService до следующей перезагрузки, и в это время будет использоваться пользователь System netsvcs”. |
Источник: www.tehnari.ru