До Марса людство так і не долетіло, ліки від усіх хвороб ще не винайдено, автомобілі не літають, але, тим не менше, існують області, в яких люди досягли небувалих висот. Обчислювальна потужність комп'ютерів - одна з таких. Для початку розберемося, що ж є ключовим параметром при оцінці цієї характеристики суперкомп'ютерів. Флопс - величина, що показує число операцій з плаваючою комою, яке ЕОМ може виконати за секунду. На підставі цього показника і був складений наш рейтинг найпотужніших комп'ютерів у світі, за даними 2019 року.
Рейтинг був представлений на конференції International Supercomputing Conference, топ-500 суперкомп'ютерів був складений вченими-математиками Національної лабораторії імені Лоуренса і Університету штату Теннессі.
10 Trinity - продуктивність 8,1 Пфлоп / сек
Цей суперкомп'ютер варто «на варті» військової безпеки США, підтримуючи ефективність національного ядерного арсеналу. З огляду на це, можна подумати, що варто цей апарат неймовірно дорого, проте, починаючи з 2015 року, його почали витісняти нові більш потужні суперкомп'ютери. Trinity працює на базі системи Cray XC40, продуктивність його становить 8,1 Пфлоп / сек.
9 Mira - 8,6 Пфлоп / сек
Mira - ще один геніальний продукт компанії Cray. Варто зазначити, що проект цього суперкомп'ютера був розроблений на замовлення Міністерства енергетики Сполучених Штатів. Головна область застосування Mira - державні промислові та науково-дослідні проекти. Обчислювальна потужність цього комп'ютера становить 8,6 петафлопс в секунду.
8 K Computer - 10,5 Пфлоп / сек
Особливість цього суперкомп'ютера криється в його назві, яке походить від японського слова «Кей» і означає 10 квадрильйонів. Приблизно в цю цифру впирається продуктивна потужність K Computer - 10,5 петафлопс. Специфіка цієї техніки полягає також в тому, що система використовує водяне охолодження, що дозволяє значно знизити споживання енергії та знизити швидкість компонування.
7 Oakforest-Pacs - 13,6 Пфлоп / сек
Японська компанія Fujitsu, яка також займалася розробкою K Computer, про який згадувалося раніше, створила суперкомп'ютер нового покоління (покоління Knights Landing). Проект був виконаний на замовлення Токійського і Цукубского університетів. Незважаючи на те, що спочатку планувалося оснастити комп'ютер пам'яттю в 900 Тбайт і продуктивністю в 25 квадрильйонів операцій, обчислювальна потужність його становить 13,6 петафлопс / c.
6 Cori - 14 Пфлоп / сек
До 2019 року Cori займав тверду 5 позицію в світовому рейтингу найпотужніших комп'ютерів, але в умовах, що швидко розвивається технічного прогресу він все ж поступився одну рейтингову «рядок» новітнім суперкомп'ютерів. Знаходиться він в Національній лабораторії імені Лоуренса і Берклі, в США. Cori вже вніс свій неповторний внесок в розвиток науки: з його допомогою швейцарські вчені зуміли змоделювати 45-кубітную квантову обчислювальну систему. 14 петафлопс - продуктивна потужність цієї «супермашини».
5 Sequoia - 17,2 петафлопс
Багато експертів називають Sequoia найшвидшим суперкомп'ютером у світі, і неспроста: арифметична продуктивність його дорівнює швидкості роботи 6,7 млрд. Чоловік, які протягом 320 років виконували б ідентичне завдання за допомогою калькуляторів. Відрізняється Sequoia і своїми розмірами: комп'ютер займає площу в 390 квадратних метрів і складається з 96 стійок. 17,2 петафлопс - його продуктивність, що дорівнює практично шістнадцяти тисячам трильйонів операцій.
4 Titan - 17,6 Пфлоп / сек
Крім того, що Titan входить в топ найшвидших комп'ютерів у світі, він також вважається одним з найбільш енергоефективних, маючи показник 2142,77 мегафлопс на Ватт споживаної енергії. Секрет економії електроенергії полягає у використанні прискорювачів Nvidia, що забезпечують до 90% всієї обчислювальної потужності, яка, до слова, становить 17,6 петафлопс. Завдяки їм же Titan помітно зменшив свої габарити - зараз для розміщення йому досить всього 404 квадратних метра.
3 Piz Daint - 19,6 петафлопс
Проект суперкомп'ютера Piz Daint був запущений ще в 2013 році, в швейцарському місті Лугано. Розташовується він там же - в Швейцарському національному центрі суперкомп'ютерів. Piz Daint зібрав майже всі позитивні характеристики перерахованих вище аналогів, включаючи енергоефективність і високу швидкість, крім компактності: апарат складається з 28 великогабаритних стійок. Його обчислювальна потужність становить 19,6 петафлопс.2 Tianhe-2 - 33,9 петафлопс
Суперкомп'ютер з романтичною назвою «Чумацький шлях» (в перекладі з китайського) до червня 2016 року очолював топ-500 найпотужніших комп'ютерів світу. Потужність його забезпечує швидкість 2507 трильйонів операцій в секунду, що дорівнює 33,9 петафлопс. Тяньхе-2 знайшов своє «покликання» в галузі будівництва: при розрахунках забудов і прокладки доріг. Варто зазначити, що з початку 2013 року, як тільки «Чумацький шлях» був випущений, він не залишав провідну позицію рейтингів, що є по-справжньому потужним показником.
1 Sunway TaihuLight - 93 петафлопс
Усередині цього комп'ютера знаходяться 40 960 продуктивних процесорів, чим і пояснюється його габаритність: сам Sunway займає площу близько 1000 квадратних метрів. У 2016 році на міжнародній конференції в Німеччині він був визнаний найшвидшим у своєму роді. На сьогоднішній день Sunway TaihuLight є першим в рейтингу і єдиним в топ-10 суперкомп'ютерів, здатним виробляти швидкість в 93 петафлопс.
Якщо розглядати технічний прогрес в розрізі його впливу на людину, суспільство в цілому і навколишнє середовище, очевидно, що він має глобальні недоліки. Сьогодні нам є безліч комп'ютерів, різних приладів і роботів. Але вищою метою є знайти гідне застосування великим винаходам людства і направити їх використання на благо нашого спільного майбутнього, не перетворюючи їх в безглузді іграшки.
У більшості людей слово "комп'ютер" асоціюється в першу чергу з персоналкой, яку можна побачити сьогодні не тільки в будь-якому офісі, а й у багатьох квартирах. Однак не варто забувати, що ПК - це лише частина комп'ютерного світу, де існують набагато більш потужні і складні обчислювальні системи, недоступні пересічному користувачеві.
Багато, напевно, чули про комп'ютер по імені Deep Blue, який в 1997 році обіграв самого Гаррі Каспарова. Інтуїтивно зрозуміло, що така машина не могла бути простою персоналкой. Інший приклад - вітчизняний комп'ютер МВС -1000 продуктивністю 200 мільярдів операцій в секунду, недавно встановлений в Міжвідомчій суперкомпьютерном центрі в Москві. Крім того, в пресі час від часу з'являються повідомлення про нелегальне постачання до Росії обчислювальної техніки, що потрапляє під ембарго американського уряду.
Подібні комп'ютери для багатьох так і залишаються таємницею за сімома печатками, оточеній ореолом асоціацій з чимось дуже великим: величезні розміри, надскладні завдання, великі фірми і компанії, неймовірні швидкості роботи і т.д. Одним словом, супер-ЕОМ, щось далеке і недосяжне. Тим часом, якщо вам хоча б раз доводилося користуватися послугами серйозних пошукових систем в Інтернеті, ви, самі того не підозрюючи, мали справу з одним з додатків суперкомп'ютерних технологій.
Що таке суперкомп'ютер?
Вважається, що супер-ЕОМ - це комп'ютери з максимальною продуктивністю. Однак швидкий розвиток комп'ютерної індустрії робить це поняття дуже і дуже відносним: то, що десять років тому можна було назвати суперкомп'ютером, сьогодні під це визначення вже не підпадає. Продуктивність перших супер-ЕОМ початку 70-х років була порівнянна з продуктивністю сучасних ПК на базі традиційних процесорів Pentium. За сьогоднішніми мірками ні ті, ні інші до суперкомп'ютерів, звичайно ж, не належать.
У будь-якому комп'ютері всі основні параметри взаємопов'язані. Важко собі уявити універсальний комп'ютер, який має високу швидкодію і мізерну оперативну пам'ять або величезну оперативну пам'ять і невеликий обсяг дисків. Звідси простий висновок: супер-ЕОМ - це комп'ютер, що має не тільки максимальну продуктивність, а й максимальний обсяг оперативної і дискової пам'яті в сукупності зі спеціалізованим програмним забезпеченням, за допомогою якого цим монстром можна ефективно користуватися.
Суперкомп'ютерів не раз намагалися давати універсальні визначення - іноді вони виходили серйозними, іноді іронічними. Наприклад, якось пропонувалося вважати суперкомп'ютером машину, вага якої перевищує одну тонну. Кілька років тому був запропонований і такий варіант: суперкомп'ютер - це пристрій, що зводить проблему обчислень до проблеми введення / виведення. Справді, завдання, які раніше обчислювалися дуже довго, на супер-ЕОМ виконуються миттєво, і майже весь час тепер йде на більш повільні процедури введення і виведення даних, які виробляються, як правило, з колишньою швидкістю.
Так що ж таке сучасний суперкомп'ютер? Найпотужніша ЕОМ на сьогоднішній день - це система Intel ASCI RED, побудована на замовлення Міністерства енергетики США. Щоб уявити собі можливості цього суперкомп'ютера, досить сказати, що він об'єднує в собі 9632 (!) Процесора Pentium Pro, має більше 600 Гбайт оперативної пам'яті і загальну продуктивність в 3200 мільярдів операцій в секунду. Людині треба було б 100000 років, щоб навіть з калькулятором виконати всі ті операції, які цей комп'ютер робить все за 1 секунду!
Створити подібну обчислювальну систему - все одно, що побудувати цілий завод зі своїми системами охолодження, безперебійного живлення і т.д. Зрозуміло, що будь-який суперкомп'ютер, навіть в більш поміркованою конфігурації, повинен коштувати не один мільйон доларів США: заради інтересу прикиньте, скільки коштують, скажімо, лише 600 Гбайт оперативної пам'яті? Виникає природне запитання: які завдання настільки важливі, що потрібні комп'ютери вартістю в кілька мільйонів доларів? Або ще один: які завдання настільки складні, що хорошого Pentium III для їх вирішення недостатньо?
Чи потрібні нам суперкомп'ютери?
Виявляється, існує цілий ряд життєво важливих проблем, які просто неможливо вирішувати без використання суперкомп'ютерних технологій.
Візьмемо, наприклад, США, по території яких два рази в рік проходять руйнівні торнадо. Вони змітають на своєму шляху міста, піднімають в повітря автомобілі і автобуси, виводять річки з берегів, заливаючи тим самим гігантські території. Боротьба з торнадо - істотна частина американського бюджету. Тільки штат Флорида, який знаходиться недалеко від тих місць, де ці смерчі народжуються, за останні роки витратив понад 50 мільярдів доларів на екстрені заходи по порятунку людей. Уряд не шкодує грошей на впровадження технологій, які дозволили б передбачати появу торнадо і визначати, куди він попрямує.
Як розрахувати торнадо? Очевидно, що для цього треба вирішити задачу про локальне зміні погоди, тобто задачу про рух мас повітря і розподілі тепла в якомусь регіоні. Принципово це нескладно, однак на практиці виникають дві проблеми. Проблема перша: щоб помітити появу смерчу, треба проводити розрахунок на характерних для його освіти розмірах, тобто на відстанях близько двох кілометрів. Друга складність пов'язана з правильним завданням початкових і граничних умов. Справа в тому, що температура на кордонах цікавить вас регіону залежить від того, що робиться в сусідніх регіонах. Розмірковуючи далі, легко переконатися, що ми не можемо вирішити задачу про смерчі, не маючи даних про клімат на всій Землі. Клімат на планеті розрахувати можна, що і робиться кожен день у всіх країнах для складання середньострокових прогнозів погоди. Однак наявні ресурси дозволяють вести розрахунки лише з дуже великим кроком - десятки і сотні кілометрів. Ясно, що до передбачення смерчів такий прогноз не має ніякого відношення.
Необхідно поєднати дві, здавалося б, погано сумісні завдання: глобальний розрахунок, де крок дуже великий, і локальний, де крок дуже маленький. Зробити це можна, але лише зібравши в кулаці дійсно фантастичні обчислювальні ресурси. Додаткова складність полягає ще і в тому, що обчислення не повинні тривати більше 4 годин, так як за 5 годин картина погоди змащується абсолютно, і все, що ви вважаєте, вже не має ніякого відношення до реальності. Потрібно не тільки обробити гігантський обсяг даних, але і зробити це досить швидко. Таке під силу лише суперкомп'ютерів.
Передбачення погоди - далеко не єдиний приклад використання суперкомп'ютерів. Сьогодні без них не обійтися в сейсморазведке, нафто- і газодобувної промисловості, автомобілебудуванні, проектуванні електронних пристроїв, фармакології, синтезі нових матеріалів і багатьох інших галузях.
Так, за даними компанії Ford, для виконання crash-тестів, при яких реальні автомобілі розбиваються об бетонну стіну з одночасним виміром необхідних параметрів, зі зйомкою і наступною обробкою результатів, їй знадобилося б від 10 до 150 прототипів для кожної нової моделі. При цьому загальні витрати склали б від 4 до 60 мільйонів доларів. Використання суперкомп'ютерів дозволило скоротити число прототипів на одну третину.
Відомій фірмі DuPont суперкомп'ютери допомогли синтезувати матеріал, який замінює хлорофлюорокарбону. Потрібно було знайти матеріал, який має ті ж позитивні якості: незаймистість, стійкість до корозії і низьку токсичність, але без шкідливого впливу на озоновий шар Землі. За один тиждень були проведені необхідні розрахунки на суперкомп'ютері з загальними витратами близько 5 тисяч доларів. За оцінками фахівців DuPont, використання традиційних експериментальних методів досліджень вимагало б 50 тисяч доларів і близько трьох місяців роботи - і це без урахування часу, необхідного на синтез і очищення необхідної кількості речовини.
Чому суперкомп'ютери вважають так швидко?
Отже, ми бачимо, що без суперкомп'ютерів сьогодні дійсно не обійтися. Залишилося прояснити ще одне питання: чому вони вважають так швидко? Це може бути пов'язано, по-перше, з розвитком елементної бази та, по-друге, з використанням нових рішень в архітектурі комп'ютерів.
Спробуємо розібратися, який з цих факторів виявляється вирішальним для досягнення рекордної продуктивності. Звернемося до відомих історичних фактів. На одному з перших комп'ютерів світу EDSAC, який з'явився в 1949 році в Кембриджі і мав час такту 2 мікросекунди (2 · 10-6 секунди), можна було виконати 2n арифметичних операцій за 18n мілісекунд, тобто в середньому 100 арифметичних операцій в секунду. Порівняємо з одним обчислювальним вузлом сучасного суперкомп'ютера Hewlett-Packard V2600: час такту приблизно 1,8 наносекунди (1,8 · 10-9 секунди), а пікова продуктивність - близько 77 мільярдів арифметичних операцій в секунду.
Що ж виходить? За півстоліття продуктивність комп'ютерів виросла більш ніж в сімсот мільйонів раз. При цьому виграш у швидкодії, пов'язаний зі зменшенням часу такту з 2 мікросекунд до 1,8 наносекунди, становить лише близько 1000 раз. Звідки ж узялася інше? Відповідь очевидна - за рахунок використання нових рішень в архітектурі комп'ютерів. Основне місце серед них займає принцип паралельної обробки даних, що втілює ідею одночасного (паралельного) виконання кількох дій.
Розрізняють два способи паралельної обробки: власне паралельну і конвеєрну. Обидва способи інтуїтивно абсолютно зрозумілі, тому зробимо лише невеликі пояснення.
паралельна обробка
Припустимо для простоти, що якийсь пристрій виконує одну операцію за один такт. В цьому випадку тисячу операцій такий пристрій виконає за тисячу тактів. Якщо є п'ять таких же незалежних пристроїв, здатних працювати одночасно, то ту ж тисячу операцій система з п'яти пристроїв може виконати вже не за тисячу, а за двісті тактів. Аналогічно система з N пристроїв ту ж роботу виконає за 1000 / N тактів. Подібні приклади можна знайти і в житті: якщо один солдат викопає траншею за 10 годин, то рота солдатів з п'ятдесяти чоловік з такими ж здібностями, працюючи одночасно, впорається з тією ж роботою за 12 хвилин-принцип паралельності в дії!
До речі, піонером в паралельної обробці потоків даних був академік А. А. Самарський, що виконував на початку 50-х років розрахунки, необхідні для моделювання ядерних вибухів. Самарський вирішив цю задачу методом сіток, посадивши кілька десятків панянок з арифмометрами за столи (вузли сітки). Панянки передавали дані одна одній просто на словах і відкладали необхідні цифри на арифмометрах. Таким чином, зокрема, була розрахована еволюція вибухової хвилі. Роботи було багато, панянки втомлювалися, а Олександр Андрійович ходив між ними і підбадьорював. Так створили, можна сказати, першу паралельну систему. Хоча розрахунки водневої бомби провели майстерно, точність їх виявилася дуже низькою, тому що вузлів в використовуваної сітці було мало, а час рахунку виходило занадто великим.
конвеєрна обробка
Що необхідно для складання двох дійсних чисел, представлених у формі з плаваючою комою? Ціле безліч дрібних операцій, таких, як порівняння порядків, вирівнювання порядків, складання мантисс, нормалізація і т.п. Процесори перших комп'ютерів виконували всі ці "мікрооперації" для кожної пари доданків послідовно, одну за одною, до тих пір, поки не доходили до остаточного результату, і лише після цього переходили до обробки наступної пари доданків.
Ідея конвеєрної обробки полягає в розчленуванні операції на окремі етапи, або, як це прийнято називати, щаблі конвеєра. Кожна ступінь, виконавши свою роботу, передає результат наступному ступені, одночасно приймаючи нову порцію вхідних даних. Виходить очевидний виграш в швидкості обробки. Справді, припустимо, що в операції додавання можна виділити п'ять мікрооперацій, кожна з яких виконується за один такт роботи комп'ютера. Якщо є одне неподільне послідовне пристрій складання, то 100 пар аргументів воно обробить за 500 тактів. Якщо тепер кожну микрооперацию перетворити в окрему щабель конвеєрного пристрою, то на п'ятому такті на різній стадії обробки будуть знаходитися перші п'ять пар аргументів, і далі конвеєрне пристрій буде видавати результат чергового складання кожен такт. Очевидно, що весь набір зі ста пар доданків буде оброблений за 104 одиниці часу - прискорення в порівнянні з послідовним пристроєм майже в п'ять разів (по числу ступенів конвеєра).
Ідеї \u200b\u200bпаралельної обробки з'явилися дуже давно. Спочатку вони впроваджувалися в самих передових, а тому одиничних комп'ютерах свого часу. Потім після належної відпрацювання технології і здешевлення виробництва вони спускалися в комп'ютери середнього класу, і нарешті сьогодні все це в повному обсязі втілюється в робочих станціях і персональних комп'ютерах. Всі сучасні мікропроцесори, будь то Pentium III або РА-8600, Е2К або Power2 SuperChip, використовують той чи інший вид паралельної обробки.
Для того щоб зайвий раз переконатися, що все нове - це добре забуте старе, досить лише кількох прикладів. Уже в 1961 році створюється комп'ютер IBM STRETCH, що має дві принципово важливі особливості: випереджаюче перегляд вперед для вибірки команд (при якому одночасно з поточної зчитуються команди, що виконуються пізніше) і розшарування пам'яті на два банки - реалізація паралелізму при роботі з пам'яттю. У 1963 році в Манчестерському університеті розроблений комп'ютер ATLAS, використовує конвеєрний принцип виконання команд. Виконання команд розбито на чотири стадії: вибірка команди, обчислення адреси операнда, вибірка операнда і виконання операції. Це дозволило зменшити час виконання команд в середньому з 6 до 1,6 мікросекунди. У 1969 році Control Data Corporation випускає комп'ютер CDC-7600 з вісьмома незалежними конвеєрними функціональними пристроями.
сучасні суперкомп'ютери
А що ж зараз використовують у світі? За якими напрямками йде розвиток високопродуктивної обчислювальної техніки? Таких напрямів чотири.
Векторно-конвеєрні комп'ютери
Дві головні особливості таких машин: наявність конвеєрних функціональних пристроїв і набору векторних команд. На відміну від звичайних команд векторні оперують цілими масивами незалежних даних, тобто команда виду А \u003d В + С може означати додавання двох масивів, а не двох чисел. Характерний представник даного напрямку - сімейство векторно-конвеєрних комп'ютерів CRAY, куди входять, наприклад, CRAY EL, CRAY J90, CRAY T90 (в березні цього року американська компанія TERA перекупила підрозділ CRAY у компанії Silicon Graphics, Inc.).
Масивно-паралельні комп'ютери з розподіленою пам'яттю
Ідея побудови комп'ютерів цього класу тривіальна: серійні мікропроцесори з'єднуються за допомогою мережевого устаткування - ось і все. Переваг у такої архітектури маса: якщо потрібна висока продуктивність, то можна додати процесори, а якщо обмежені фінанси або заздалегідь відома необхідна обчислювальна потужність, то легко підібрати оптимальну конфігурацію. До цього ж класу можна віднести і прості мережі комп'ютерів, які сьогодні все частіше розглядаються як дешева альтернатива вкрай дорогим суперкомп'ютерів. (Правда, написати ефективну паралельну програму для таких мереж досить складно, а в деяких випадках просто неможливо). До масивно-паралельних можна віднести комп'ютери Intel Paragon, ASCI RED, IBM SP1, Parsytec, в якійсь мірі IBM SP2 і CRAY T3D / T3E.
Паралельні комп'ютери із загальною пам'яттю
Вся оперативна пам'ять в таких комп'ютерах розділяється декількома однаковими процесорами, що звертаються до загальної дискової пам'яті. Проблем з обміном даними між процесорами і синхронізацією їх роботи практично не виникає. Разом з тим головний недолік такої архітектури полягає в тому, що через суто технічні причини число процесорів, що мають доступ до загальної пам'яті, не можна зробити великим. В даний напрямок суперкомп'ютерів входять багато сучасних SMP-комп'ютери (Symmetric Multi Processing), наприклад сервер НР9000 N-class або Sun Ultra Enterprise 5000.
кластерні комп'ютери
Цей клас суперкомп'ютерів, строго кажучи, не можна назвати самостійною, скоріше, він являє собою комбінації попередніх трьох. З кількох процесорів, традиційних або векторно-конвеєрних, і загальної для них пам'яті формується обчислювальний вузол. Якщо потужності одного вузла недостатньо, створюється кластер з декількох вузлів, об'єднаних високошвидкісними каналами. За таким принципом побудовані CRAY SV1, HP Exemplar, Sun StarFire, NEC SX-5, останні моделі IBM SP2 і інші. В даний час саме цей напрямок вважається найбільш перспективним.
Два рази на рік складається список п'ятисот найпотужніших обчислювальних установок світу (його можна подивитися в Інтернеті за адресою http://parallel.ru/top500.html). Згідно з останньою редакцією списку top500, що вийшла в листопаді минулого року, перше місце займає масивно-паралельний комп'ютер Intel ASCI Red. На другій позиції стоїть комп'ютер ASCI Blue-Pacific від IBM, який об'єднує 5808 процесорів PowerPC 604e / 332MHz. Обидва ці суперкомп'ютера створені в рамках американської національної програми Advanced Strategic Computing Initiative, абревіатура якої і є присутнім у назві. Продуктивність комп'ютера, що стоїть на останньому, 500-му місці в списку найбільш потужних, становить 33,4 мільярда операцій в секунду.
Якщо потужність існуючих комп'ютерів вражає, то що говорити про плани. У грудні 1999 року корпорація IBM повідомила про новий дослідницький проект загальною вартістю близько 100 мільйонів доларів, мета якого - побудова суперкомп'ютера, в 500 разів перевершує за продуктивністю найпотужніші комп'ютери сьогоднішнього дня. Комп'ютер, що має умовну назву Blue Gene, матиме продуктивність близько 1 PETAFLOPS (1015 операцій в секунду) і використовуватися для вивчення властивостей білкових молекул. Передбачається, що кожен окремий процесор Blue Gene буде мати продуктивність близько 1 GFLOPS (109 операцій в секунду). 32 подібних процесора будуть поміщені на одну мікросхему. Компактна плата розміром 2x2 фути вміщуватиме 64 мікросхеми, що по продуктивності не поступається згадуваним раніше суперкомп'ютерів ASCI, котрий обіймав площа 8000 квадратних метрів. Більш того, 8 таких плат будуть поміщені в 6-футову стійку, а вся система буде складатися з 64 стійок із сумарним подаванням 1 PFLOPS. Фантастика!
Обчислювальний кластер Московського державного університету ім. М. В. Ломоносова - мінімальна вартість, суперкомп'ютерна продуктивність. На даний момент це найпотужніша обчислювальна система, встановлена \u200b\u200bв вузі Росії.
Суперкомп'ютери в Росії
Ідеї \u200b\u200bпобудови власних суперкомп'ютерних систем існували в Росії завжди. Ще в 1966 році М.О.Карцев висунув ідею створення багатомашинного обчислювального комплексу М-9 продуктивністю близько мільярда операцій в секунду. У той час жодна з машин світу не працювала з такою швидкістю. Однак, незважаючи на позитивну оцінку міністерства, комплекс М-9 промислового освоєння не отримав.
Роботи зі створення суперкомп'ютерних систем і суперкомп'ютерних центрів ведуться в Росії і зараз. Найбільш відома лінія вітчизняних суперкомп'ютерів МВС-1000, створювана в кооперації науково-дослідних інститутів Російської академії наук і промисловості. Супер-ЕОМ лінії МВС-1000 - це мультипроцесорний масив, об'єднаний з зовнішньої дискової пам'яттю, пристроями введення / виведення інформації і керуючим комп'ютером. Комп'ютери МВС -1000 використовують мікропроцесори Alpha 21164 (розробка фірми DEC-Compaq) з продуктивністю до 1-2 мільярдів операцій в секунду і оперативною пам'яттю об'ємом 0,1-2 Гб.
Спектр наукових і практичних завдань, що вирішуються на такому комп'ютері, може бути дуже великий: розрахунок тривимірних нестаціонарних течій вязкосжімаемого газу, розрахунки течій з локальними тепловими неоднородностями в потоці, моделювання структуроутворення і динаміки молекулярних і біомолекулярних систем, рішення задач лінійних диференціальних ігор, розрахунок деформацій твердих тел з урахуванням процесів руйнування і багато інших. Одна з найпотужніших систем лінії МВС-1000, встановлена \u200b\u200bв Міжвідомчій суперкомпьютерном центрі, містить 96 процесорів.
Останнім часом в Росії, також як і в усьому світі, активно використовується кластерний підхід до побудови суперкомп'ютерів. Купуються стандартні комп'ютери і робочі станції, які за допомогою стандартних мережевих засобів об'єднуються в паралельну обчислювальну систему. Таким шляхом пішов, і, треба сказати, успішно, Науково-дослідний обчислювальний центр Московського державного університету ім. М.В.Ломоносова, який створив кластер з 12 двопроцесорних серверів "Ексімер" на базі Intel Pentium III / 500MHz (в сумі 24 процесора, більше 3 Гбайт оперативної пам'яті, 66 Гбайт дискової пам'яті). Сьогодні це найбільша обчислювальна установка в вузі Росії, призначена для підтримки фундаментальних наукових досліджень і освіти. При мінімальній вартості обчислювальний кластер НИВЦ МГУ показує продуктивність 5,7 мільярда операцій в секунду при вирішенні системи лінійних алгебраїчних рівнянь з щільною матрицею розміром 16000x16000! В майбутньому планується значно збільшити потужність кластера як за рахунок додавання нових процесорів, так і за рахунок модернізації обчислювальних вузлів.
замість висновку
На жаль, дива в нашому житті трапляються рідко. Гігантська продуктивність паралельних комп'ютерів і супер-ЕОМ з лишком компенсується складністю їх використання. Так що там використання, іноді навіть питання, що виникають навколо суперкомп'ютерів, ставлять у глухий кут. Як ви думаєте, чи правильно твердження: чим потужніший комп'ютер, тим швидше на ньому можна вирішити це завдання? Ну, звичайно ж, немає ... Простий побутовий приклад. Якщо один землекоп викопає яму за 1 годину, то два землекопа впораються з завданням за 30 хв - в це ще можна повірити. А за скільки часу цю роботу зроблять 60 землекопів? Невже за 1 хвилину? Звичайно ж ні! Починаючи з певного моменту вони будуть просто заважати один одному, не прискорюючи, а уповільнюючи процес. Так само і в комп'ютерах: якщо завдання занадто мала, то ми будемо довше займатися розподілом роботи, синхронізацією процесів, складанням результатів і т. П., Ніж безпосередньо корисною діяльністю.
Але все питання, які супроводжують суперкомп'ютер, звичайно ж, вирішуються. Так, використовувати суперкомп'ютери складніше, ніж персоналку: потрібні додаткові знання і технології, висококваліфіковані фахівці, більш складна інформаційна інфраструктура. Написати ефективну паралельну програму набагато складніше, ніж послідовну, та й взагалі створення програмного забезпечення для паралельних комп'ютерів - це центральна проблема суперкомп'ютерних обчислень. Але без супер-ЕОМ сьогодні не обійтися, і відрадно, що в нашій країні є розуміння необхідності розвитку цих технологій. Так, в листопаді минулого року в Президії Російської академії наук відбулося відкриття міжвідомчого суперкомп'ютерного центру. У процесі становлення суперкомп'ютерні центри в Дубні, Черноголовке, Інституті прикладної математики РАН ім. М. В. Келдиша, Інституті математичного моделювання РАН, Московському державному університеті ім. М. В. Ломоносова. Створена і розвивається лінія вітчизняних суперкомп'ютерів МВС-1000. Активно розгортає свою діяльність Інформаційно-аналітичний центр з паралельних обчислень в мережі Інтернет WWW.PARALLEL.RU, який здійснює інформаційну підтримку багатьох російських проектів. А інакше і не можна. Паралельні обчислення і паралельні комп'ютери - це реальність, і це вже назавжди.
Доктор фізико-математичних наук В. Воєводін
Вп'яте поспіль китайський Tianhe-2 (Чумацький шлях 2) ставати найшвидшим суперкомп'ютером у світі з продуктивністю 33.86 петафлопс або квадрильйон операцій з плаваючою комою в секунду. Такий вердикт списку найпотужніших суперкомп'ютерів TOP500, який випускається двічі на рік.
Незважаючи на очікуваний результат, в останньому виданні все ж є трохи цікавої інформації. Сполучені Штати як і раніше мають більше систем в списку, ніж будь-яка інша країна - 233 машини (для порівняння півроку тому було 231, а рік тому 265). Друге і третє місця займають системи з США, в той час як 141 машина зі списку, розміщена в Європі. Примітно, що три нових комп'ютера належать китайської компанії Lenovo, хоча сам Китай представлений всього 37 суперкомпьютерами, в порівнянні з 61 в минулому році.
Середня продуктивність TOP500 значно зросла за останні 6 місяців. Сумарна потужність всіх 500 суперкомп'ютерів склала 363 петафлопс / c, що помітно більше, ніж 309 в минулому листопаді і 274 рік тому. 98% систем використовують процесори з шістьма ядрами і більш, в той час як, принаймні, 88,2%, мають 8 ядер на процесор. Вісімдесят вісім з п'ятисот систем використовували прискорювачі / співпроцесори, серед яких Nvidia (52), ATI Radeon (4), і Intel Xeon Phi (33). Чотири системи використовують комбінацію процесорів Xeon і Nvidia.
Топ-10 складається з машин, запущених в 2011 і 2012 році, за винятком нового учасника з Саудівської Аравії під номером 7. Ось як виглядають список 10 найбільш потужних суперкомп'ютерів світу.
- Tianhe-2: Кластер TH-IVB-FEP; Національний суперкомп'ютерний центр в Гуанчжоу, Китай; 3.12 мільйона ядер (33.86 Пфлопс / с).
- Titan: Система Cray XK7, Національна лабораторія Оук-Рідж, США. 560 640 ядер (17.59 Пфлопс / с).
- Sequoia: Система IBM BlueGene / Q, Ливерморская національна Лабораторія 1.57 мільйона ядер, (17.2 Пфлопс / с).
- K Computer: Система SPARC64 з 705 024 ядрами в RIKEN Інститут передової обчислювальної науки в Інституті фізико-хімічних досліджень (RIKEN), Японія. (10.5 Пфлопс / с).
- Mira: IBM BlueGene / Q; DOE / SC / Аргонської національної лабораторія, США; 786 000 ядер IBM. (8.59 Пфлопс / с).
- Piz Daint: Cray XC30 з 116 000 ядер від Xeon і Nvidia; located at the Швейцарський національний обчислювальний центр. (6.27 Пфлопс / с).
- Shaheen II: Система Cray XC40. Університет науки і технологій Короля Абдулли в Саудівській Аравії. (5.536 Пфлопс / с).
- Stampede: Система Dell PowerEdge C8220 з 462 462 ядрами Xeon Phi в Університеті Техасу (5.17 Пфлопс / с).
- JUQUEEN: BlueGene / Q, 458 752 ядра IBM. Юліхський дослідницький центр, Німеччина. (5 Пфлопс / с).
- Vulcan: BlueGene / Q, 393 216 ядер IBM, Департамент Енергетики США.
Потрібно пам'ятати, що розклади можуть різко змінитися, якщо хтось створить справжній квантовий комп'ютер. IBM пішли на рекорд, збираючись створити комп'ютер на 50 кубітів (з поточним максимумом в 4), який може стати потужнішим, ніж будь-яка система в цьому списку.
Тим часом Департамент Енергетики США замовив дві системи IBM / Nvidia в угоді на $ 425 млн. Постачання машин запланована на 2017 і 2018 рік, а пікова потужність може скласти 150 петафлопс.
Раніше займав перше місце суперкомп'ютер K Computer відсунутий на третє місце. Його продуктивність складає 11,28 Пфлопс (див. Малюнок 1). Нагадаємо, що флопс (FLoating-point Operations Per Second, FLOPS) - це одиниця виміру продуктивності комп'ютерів, яка показує, скільки операцій з плаваючою комою в секунду здатна виконати дана обчислювальна система.
K Computer є спільною розробкою Інституту фізико-хімічних досліджень Рікагаку Кенкійо (RIKEN) і Fujitsu. Він створювався в рамках ініціативи High-Performance Computing Infrastructure (Інфраструктура високопродуктивних комп'ютерних обчислень), очолюваної японським міністерством освіти, культури, спорту, науки і технологій (MEXT). Суперкомп'ютер встановлений на території Інституту передових обчислювальних наук в японському місті Кобе.
В основу суперкомп'ютера покладена архітектура розподіленої пам'яті. Система складається з більш ніж 80 000 обчислювальних вузлів і розміщується в 864 стійках, кожна з яких вміщує 96 обчислювальних вузлів і 6 вузлів вводу / виводу. Вузли, що містять по одному процесору і по 16 Гбайт оперативної пам'яті, з'єднуються між собою відповідно до топології «шестімерной петля / тор». В цілому в системі використовується 88 128 восьмиядерних процесорів SPARC64 VIIIfx (705 024 ядра), вироблених Fujitsu за технологією 45 нм.
Цей суперкомп'ютер загального призначення забезпечує високий рівень продуктивності і підтримку широкого ряду додатків. Система використовується для проведення досліджень в області кліматичних змін, запобігання стихійним лихам і медицини.
Унікальна система водяного охолодження дозволяє знизити ймовірність відмови обладнання і скоротити загальне енергоспоживання. Економія енергії досягається за рахунок застосування високоефективного обладнання, системи когенерації теплової та електричної енергії і масиву сонячних батарей. Крім того, механізм повторного використання відпрацьованої води з охолоджувача дозволяє знизити негативний вплив на навколишнє середовище.
Будівля, в якій розташовано K Computer, є сейсмостійкості і здатне витримувати землетруси магнітудою 6 і більше балів за японською шкалою (0-7). Для більш ефективного розміщення стійок з обладнанням і кабелів третій поверх розміром 50 × 60 м повністю звільнений від несучих колон. Сучасні технології будівництва дозволили забезпечити допустимий рівень навантаження (до 1 т / м 2) для установки стійок, вага яких може досягати 1,5 т.
суперкомп'ютер SEQUOIA
Суперкомп'ютер Sequoia, встановлений в Ліверморської національної лабораторії ім. Лоуренса, має продуктивність 16,32 Пфлопс і займає другий рядок рейтингу (див. Малюнок 2).
Цей петафлопсний суперкомп'ютер, розроблений компанією IBM на базі Blue Gene / Q, створений для Національної адміністрації з ядерної безпеки США (NNSA) в рамках реалізації програми Advanced Simulation and Computing (Високотехнологічне моделювання та комп'ютерні обчислення).
Система складається з 96 стійок і 98 304 обчислювальних вузлів (1024 вузла на стійку). Кожен вузол включає в себе 16-ядерний процесор PowerPC A2 і 16 Гбайт оперативної пам'яті DDR3. В цілому використовується 1 572 864 процесорних ядра і 1,6 Пбайт пам'яті. Вузли з'єднуються між собою відповідно до топології «пятімерний тор». Займана системою площа дорівнює 280 м2. Загальне енергоспоживання становить 7,9 МВт.
На суперкомп'ютері Sequoia вперше в світі були проведені наукові обчислення, для яких була потрібна обчислювальна потужність більше 10 Пфлопс. Так, системі космологічного моделювання HACC було потрібно близько 14 Пфлопс при запуску в режимі 3,6 трлн частинок, а під час запуску коду проекту Cardiod для моделювання електрофізіології людського серця продуктивність досягла майже 12 Пфлопс.
суперкомп'ютер TITAN
Найшвидшим у світі суперкомп'ютером був визнаний суперкомп'ютер Titan, встановлений в Окриджской національної лабораторії (ORNL) в США. У тестових випробуваннях Linpack його продуктивність склала 17,59 Пфлопс.
У Titan реалізована гібридна архітектура CPU-GPU (див. Малюнок 3). Система складається з 18 688 вузлів, кожен з яких оснащений 16-ядерним процесором AMD Opteron і графічним прискорювачем Nvidia Tesla K20X. В цілому використовується 560 640 процесорів. Titan являє собою оновлення раніше експлуатувалося в ORNL суперкомп'ютера Jaguar і займає ті ж серверні шафи (загальною площею 404 м 2).
Можливість використання вже існуючих систем живлення і охолодження дозволила заощадити в ході будівництва близько 20 млн доларів. Енергоспоживання суперкомп'ютера складає 8,2 МВт, що на 1,2 МВт більше показників Jaguar, при цьому його продуктивність при виконанні операцій з плаваючою крапкою вище майже в 10 разів.
Titan в першу чергу буде використовуватися для проведення досліджень в області науки про матеріали і ядерної енергетики, а також досліджень, що стосуються підвищення ефективності роботи двигунів внутрішнього згоряння. Крім того, з його допомогою будуть виконуватися моделювання кліматичних змін і аналіз потенційних стратегій щодо усунення пов'язаних з ними негативних наслідків.
НАЙБІЛЬШИЙ «ЗЕЛЕНИЙ» суперкомп'ютер
Крім рейтингу Top500, націленого на визначення найбільш високопродуктивної системи, існує рейтинг Green500, де відзначені «зелені» суперкомп'ютери. Тут за основу прийнятий показник енергоефективності (Мфлопс / Вт). На даний момент (останній випуск рейтингу - листопад 2012 року) лідером Green500 є суперкомп'ютер Beacon (253-е місце в Top500). Показник його енергоефективності становить 2499 Мфлопс / Вт.
Beacon працює на базі сопроцессоров Intel Xeon Phi 5110P і процесорів Intel Xeon E5-2670, тому пікова продуктивність може досягати 112 200 Гфлопс при загальному енергоспоживанні в 44,9 кВт. Співпроцесори Xeon Phi 5110P забезпечують високу продуктивність при низькому енергоспоживанні. Кожен співпроцесор має потужність в 1 Тфлопс (при виконанні операцій з подвійною точністю) і підтримує до 8 Гбайт пам'яті класу GDDR5 з пропускною спроможністю в 320 Гбіт / с.
Пасивна система охолодження Xeon Phi 5110P розрахована на TDP 225 Вт, що є ідеальним показником для серверів високої щільності.
суперкомп'ютер EURORA
Однак в лютому 2013 року з'явилися повідомлення про те, що суперкомп'ютер Eurora, розташований в місті Болонья (Італія), по енергоефективності перевершив Beacon (3150 Мфлопс / ват проти 2499 Мфлопс / Вт).
Eurora побудований компанією Eurotech і складається з 64 вузлів, кожен з яких включає в себе два процесори Intel Xeon E5-2687W, два прискорювача Nvidia Tesla K20 GPU і інше обладнання. Габарити подібного вузла не перевищують габаритів ноутбука, однак їх продуктивність вище в 30 разів, а енергоспоживання нижче в 15 разів.
Висока ефективність енергоспоживання в Eurora досягнута шляхом використання декількох технологій. Найбільший внесок вносить водяне охолодження. Так, кожен вузол суперкомп'ютера є своєрідним бутерброд: центральне обладнання знизу, водяний теплообмінник в середині і ще один блок електроніки зверху (див. Малюнок 4).
Настільки високі результати забезпечуються завдяки застосуванню матеріалів з хорошою теплопровідністю, а також розгалужену мережу охолоджуючих каналів. При установці нового обчислювального модуля його канали поєднуються з каналами системи охолодження, що дозволяє змінювати конфігурацію суперкомп'ютера в залежності від конкретних потреб. За запевненням виробників, ризик протікання виключений.
Електроживлення елементів суперкомп'ютера Eurora здійснюється за допомогою 48-вольтів джерел постійного струму, впровадження яких дозволило скоротити число перетворень енергії. Нарешті, відведена від обчислювального обладнання тепла вода може використовуватися і в інших цілях.
ВИСНОВОК
Галузь суперкомп'ютерів активно розвивається і ставить все нові і нові рекорди продуктивності і енергоефективності. Слід зазначити, що саме в цій галузі, як ніде більше, сьогодні широко застосовуються технології рідинного охолодження і 3D-моделювання, так як перед фахівцями стоїть завдання скомпонувати надпотужну обчислювальну систему, яка була б здатна функціонувати в обмеженому обсязі при мінімальних втратах енергії.
Юрій Хомутський - головний інженер проектів компанії «Ай-Теко». З ним можна зв'язатися за адресою: [Email protected] . У статті використані матеріали інтернет-порталу про центрах обробки даних «www.AboutDC.ru - Рішення для ЦОД».
Час прочитання:2 хв.
До сих пір людство так і не досягло териконів Марса, не винайшло еліксир молодості, авто ще не можуть злетіти над землею, але є кілька сфер, в яких ми все таки досягли успіху. Створення потужних суперкомп'ютерів - саме така сфера. Щоб оцінити потужність комп'ютера, потрібно визначити який ключовий параметр відповідає за цю характеристику. Цим параметром є флопс - величина, яка показує, скільки операцій може виконати ПК за одну секунду. Саме, на підставі цієї величини, наш журнал Великий Рейтинг та розставив найпотужніші комп'ютери у світі на 2017 рік.
Потужність суперкомп'ютера - 8,1 Пфлоп / сек
Цей комп'ютер зберігає дані, які відповідають за безпеку військової структури Сполучених Штатів, також він відповідає за стан готовності ядерної атаки, в разі необхідності. Два роки тому ця машина була однією з найбільш потужних і дорогих в світі, але на сьогодні Trinity витіснили більш нові апарати. Система, на якій працює цей суперкомп'ютер - Cray XC40, завдяки їй, апарат і може «видавати» таку кількість операцій в секунду.
Mira
Потужність суперкомп'ютера - 8,6 Пфлоп / сек
Компанія Cray випустила ще один суперкомп'ютер - Mira. Міністерство енергетики США замовило випуск цієї машини, для координації своєї роботи. Сфера, в якій працює Mira - промисловість і розвиток науково-дослідного потенціалу. У секунду цей суперкомп'ютер може розрахувати 8,6 петафлопс.
Потужність суперкомп'ютера - 10,5 Пфлоп / сек
Назва цього апарату відразу описує потужність, японське слово «кей» (К) означає десять квадрильйонів. Ця цифра майже точно описувати його продуктивну потужність - 10,5 петафлопс. «Фішкою» цього суперкомп'ютера є його система охолодження. Використовують водяне охолодження, яке знижує споживання енергетичних запасів і знижує показники швидкості компонування.
Потужність суперкомп'ютера - 13,6 Пфлоп / сек
Fujitsu - компанія з країни Вранішнього Сонця, не зупинилася в роботі, випустивши суперкомп'ютер K Computer, вони відразу ж взялися за новий проект. Цим проектом став суперкомп'ютер Oakforest-Pacs, який відносять до машин нового покоління (покоління Knights landing). Його розробку замовили Токійський і Цукубскій університети. За попереднім планом, пам'ять апарату повинна була бути 900 Тбайт, а продуктивність Oakforest-Pacs становила б 25 квадралліонов операцій в секунду. Але при нестачі фінансування, не було доопрацьовано безліч аспектів, тому потужність суперкомп'ютера склала 13,6 петафлопс в секунду.
Cori
Потужність суперкомп'ютера - 14 Пфлоп / сек
Ще в минулому році Cori був на шостому рядку в списку найпотужніших суперкомп'ютерів у світі, але при божевільній швидкості розвитку технологій, він поступився одну позицію. Цей суперкомп'ютер знаходиться в Сполучених Штатах, в Національній лабораторії імені Лоуренса і Берклі. Вчені зі Швейцарії, за допомогою Cori змогли розробити 45-кубітную квантову обчислювальну машину. Виробнича потужність цього суперкомп'ютера - 14 петафлопс в секунду.
Потужність суперкомп'ютера - 17,2 Пфлоп / сек
Вчені з усього світу довгий час сходилися на думці, що Sequoia - найшвидший суперкомп'ютер на планеті. І це не просто так, адже він здатний зробити арифметичні розрахунки, на які б людям в кількості 6,7 млрд. Знадобилося б 320 років, за одну секунду. Воістину, вражають розміри машини - вона займає більш ніж 390 квадратних метра і в її склад входить 96 стійок. Шістнадцять тисяч трильйонів операцій або іншими словами 17,2 петафлопс - виробнича потужність цього суперкомп'ютера.
Titan
Потужність суперкомп'ютера - 17,6 Пфлоп / сек
Крім того, що цей суперкомп'ютер один з найшвидших на планеті, він ще й дуже енергоеффектівен. Показник енергоефективності складає 2142,77 мегафлопс на Ватт енергії, необхідної для споживання. Причиною такої низької енергопотребляемость є прискорювач Nvidia, який забезпечує до 90% потужності, необхідної для обчислень. Крім цього, прискорювач Nvidia значно скоротила площу, яку займав цей суперкомп'ютер, тепер йому потрібно всього лише 404 квадратних метра.
Потужність суперкомп'ютера - 19,6 Пфлоп / сек
Перший запуск цього апарата відбувся в 2013 році, в Швейцарії, в місті Лугано. Зараз геолокація цього суперкомп'ютера - Швейцарський національний центр суперкомп'ютерів. Piz Daint - це поєднання всіх кращих характеристик перерахованих вище машин, у нього дуже високий показник енергоефективності та він дуже швидкий в обчисленнях. Тільки одна характеристика залишає бажати кращого - габарити цього суперкомп'ютера, він займає 28 величезних стійок. Piz Daint здатний працювати з обчислювальною потужністю 19,6 петафлопс в секунду.
Потужність суперкомп'ютера - 33,9 Пфлоп / сек
Цей апарат має романтичну назву Tianhe, що з китайського, в перекладі, означає «Чумацький Шлях». Tianhe-2 був найшвидшим комп'ютером в списку 500-ти найшвидших і найпотужніших суперкомп'ютерів. Він може розрахувати 2507 арифметичних операцій, що в перекладі на петафлопс складе 33,9 Пфлоп / сек. Спеціалізація, в якій використовують цей комп'ютер - будівництво, він розраховує операції пов'язані із забудовою і прокладанням доріг. Ще з першого запуску в 2013 році, цей комп'ютер не втрачає свої позиції в списках, що доводить, що це одна з кращих машин в світі.
Потужність суперкомп'ютера - 93 Пфлоп / сек
Sunway TaihuLight - найшвидший суперкомп'ютер у світі, крім своєї величезної швидкості обчислень, він славиться ще й своїми величезними габаритами - він займає площу понад 1000 квадратних метрів. Міжнародна конференція 2016 року, яка проходила в Німеччині, визнала цей суперкомп'ютер найшвидшим в світі і він до цих пір не має серйозного конкурента в цьому плані. Його швидкість в три рази перевищує показники Tianhe-2, найближчий до нього суперкомп'ютер в цьому плані!
Технічний прогрес не стоїть на місці, він розвивається з космічною швидкістю, впливає на безліч аспектів людського життя, має безліч як позитивних, так і негативних сторін. Для людини зараз доступною стала техніка самих різних типів: комп'ютери, роботи і прилади. Але головною метою будь-якої апаратури є спрощення життя людини, техніка не повинна стати безглуздим розвагою, яке буде тільки витрачати ваш час.
