Бамп скрином состояния из intel rapid
Бамп
Бамп 2\5
Бамп 3\5 бля в хдд треде скорость постинга на уровне мёртвой улитки, а проблему желательно решить сегодня
Бамп 4\5 бля, да оторвитесь вы от своих интел-амуде-нвидиа срачей
Перекатился в hdd тред, но буду мониторить этот пока не утонет.
Ну вот смотри антош. Поскольку у тебя NM серия, значит детальки в HDD куда более тщательнее и строже оттестированы при производстве. С учетом имеющейся наработки в часах а также наличие в двух из трех дисков индикации о не исправимых ошибках чтения (атрибут BB) можно сделать вывод что потихоньку начинает падать точность позиционирования головок, скорее всего износ механики. Если бы ты скинул полный смарт, то было бы видно сколько записи и чтения пережили диски. Если проблема не софтовая(гонит сам RAID), то зависания могут быть при попытке контроллера заново проюзать цилиндр диска, дабы внести поправки в рабочую область для будущей записи. Тут могут быть как проблемы с чтением плохого сектора(множественные попытки), так и с внутренними коллизиями в работе контроллера с плохими секторами в условиях когда нужно обслуживать внешний запрос на этот сектор. Вот почему я не люблю SATA в рейдах. Слишком маленькая очередь команд, проблемы с дуплексными операциями, очень "нежные" условия проверки целостности данных, просто мало нужных для рейда команд. SATA для рейда подходит очень слабо, скажем для высоко нагруженного рейда не подходит совсем. Тут нужен SAS, а лучше вообще U.2, но если корпоративный SSD не по карману, то купи любой дешманский HBA c одним или двумя SFF-8087 портами. SAS (SFF-8482) обеспечит двухпортовость, и решит многие проблемы "залипаний" в работе рейда.
Ну а пока, по скольку есть бэкапы, вытаскивай диски и обнуляй их все, после смотри смарт и делай выводы и жизнеспособности железок. БП лучше иметь тестер, если нет, то воткни его в другой системник, и нагрузи чем нибудь. Это в случае апаратныйх проблем, в случае софта, ну тут уже нужна конкретика.
Ебать ты АД.
Здравый админ на чане. Аллилуя аноны!
Можно я тут свою дебиловатую проблему опишу?
Мамо на Z77, БП 700Вт ФСП,
стоят:
SSD 60Gb2 в RAID 0 (система)
HDD 500Gb3 RAID 5 (Ценное)
HDD 3000Gb без RAID (всякое хуйня)
Вопрос в том, что при небольшом простое появляется циклический звук запуска и останова винта. Не могу понять какого из. Смарты более-менее чистые, прогнал все винты Викторией - бедов нет.
Что за хуйня такая?....
Мамо на Z77, БП 700Вт ФСП,
стоят:
SSD 60Gb2 в RAID 0 (система)
HDD 500Gb3 RAID 5 (Ценное)
HDD 3000Gb без RAID (всякое хуйня)
Вопрос в том, что при небольшом простое появляется циклический звук запуска и останова винта. Не могу понять какого из. Смарты более-менее чистые, прогнал все винты Викторией - бедов нет.
Что за хуйня такая?....
Вот тебя-то я и ждал, да не дождался.
>Полный смарт
Я их проведу, но на выходных, сервер то "боевой лул", вынимать диски из сервера и проводить их смарт я смогу только тогда, когда не будет особой нагрузки.
>Если проблема не софтовая(гонит сам RAID), то зависания могут быть при попытке контроллера заново проюзать цилиндр диска, дабы внести поправки в рабочую область для будущей записи.
Т.е. было бы не плохо заменить два проблемных диска? Второй-то точно не жилец теперь, в рейде он у меня простоит только до выходных. Значит, если я заменю проблемные диски и проведу ребилд рейда, такая проблема уйдёт?
>u.2
Думаю для нашего завода это "оверкилл", у нас не такая сильная нагрузка юзеров, которые обращаются к серверу.
>SAS
Вот это уже можно рассмотреть, причём я уже давно думаю попробовать выжать денег на NAS хранилище, но опять же, желательно не сильно дорогое. Как я понимаю, моё "желательно не сильно дорогое" это сборка на FreeNAS, но я с ним ещё не работал, а проблему хотелось бы решить как можно быстрее, хотя бы временно.
Что такое циклический звук? Через какое время после звука остановки ты слышишь звук запуска? Через сколько следующая остановка?
>Т.е. было бы не плохо заменить два проблемных диска
Сначала обнулить, потом смотреть смарт, потом делать выводы. Если смарт не изменился, то можно прогнать анвилом для проверки целостности того что ушло на диск. Если все ОК, то юзать дальше.
Кстати раз у вас не бохатый завод, то думаю HBA уровня $200 (https://ru.aliexpress.com/item/LODFIBER-for-LSI-9341-MegaRAID-SAS-9341-8i-LSI00407-PCI-Express-3-0-x8-Low/32827539903.html?spm=a2g0v.search0604.3.8.26ee3a6dXBxKRH&ws_ab_test=searchweb0_0,searchweb201602_3_10065_10068_319_10059_10884_317_10887_10696_321_322_10084_453_10083_454_10103_10618_10307_537_536,searchweb201603_51,ppcSwitch_0&algo_expid=a54e8e2d-2bbb-42e0-8b52-bdb3f8083347-1&algo_pvid=a54e8e2d-2bbb-42e0-8b52-bdb3f8083347&transAbTest=ae803_4) и SSD уровня TLC и 1 DWPD (5л) - $500 (https://www.span.com/product/Samsung-Enterprise-SSD-PM1643-MZILT1T9HAJQ-00007-2-5-SAS-12Gb-1-92TB-SSD~68209) будет самое то. Я сильно не искал, может где дешевле будут.
Или не жопиться и взять вот это (https://ru.aliexpress.com/item/RaidStorage-Avago-LSI-MegaRAID-SAS-9440-8I-05-50008-02-SFF8643-NVMe-U-2-HD-PCI/32890426528.html?spm=a2g0v.search0604.3.2.193a1d0fElEFyq&ws_ab_test=searchweb0_0,searchweb201602_3_10065_10068_319_10059_10884_317_10887_10696_321_322_10084_453_10083_454_10103_10618_10307_537_536,searchweb201603_51,ppcSwitch_0&algo_expid=37d2acd1-7907-4826-8635-43c5febf7c08-0&algo_pvid=37d2acd1-7907-4826-8635-43c5febf7c08&transAbTest=ae803_4) с запасом на будущее так сказать. Уже кое где U.2 накопители дешевле аналогичных по объему собратьев на SAS. Кстати предлагаю именно SSD. Поскольку забываешь о понятии надежности, только отказоустойчивости. SSD не сыпяться, и гораздо быстрее, и глядя на цену трех SAS HDD 3.5" по 1 TB ($350 - https://www.span.com/product/Seagate-Exos-7E8-Enterprise-Capacity-3-5-HDD-V-5-512n-ST1000NM0045-3-5-SAS-12Gb-1TB-7200rpm~58722) не вижу смысла экономиться эти 120 долларов.
>на NAS хранилище
Что именно? Рабочая станция? Сервер? (офисные на 2-8 дисков только с SATA идут)
>рейде-5
>2019
Сажи.
Спасибо за помощь, анонче, а для u.2 накопителей нужен какой-то свой рейд контроллер? Я так-то посмотрел, вроде есть ссд на 1тб за 15к, интеловский, там конечно скорость записи не такая большая, как у тех, что за 90к, но и больше чем у sas накопителей.
>1tb.
2tb*
быстро-фикс
> а для u.2 накопителей нужен какой-то свой рейд контроллер?
Да я написал вторым рейд контроллер - 9440-8i, или можно HBA тоже броадкомоский 9400-8I,
>вроде есть ссд на 1тб за 15к, интеловский, там конечно скорость записи не такая большая
Если ты про новоиспеченные QLC накопители Intel, то нет, я лучше на механике останусь чем с ними дело иметь. У них плавает латентность, ресурса нет, так как усиления записи минимум 4 единицы, да и линейные скорости не ахти.
Постоянно, стоп-старт-стоп-старт...
При чём появляется после простоя. Если обращаться к винтам - звука нет, всё норм.
Как-будто какой-то винт пытается уснуть, но ему не спится.
Анон, через пять лет после производства жесткие диски начинают превращаться в минное поле. Не еби себе мозг, купи два новых диска в два раза больше и сделай себе честный RAID 1.
Двухпортовые диски и SAS-контроллеры тебе нахер не нужны, у тебя один сервер (а у дисков по одной механике).
>не еби себе мозг, купи два новых диска в два раза больше и сделай себе честный RAID 1.
this
> Не могу понять какого из.
Стетоскоп купи, лол.
>Двухпортовые диски и SAS-контроллеры тебе нахер не нужны
А вот и эксперд в рейдах подъехал.
>Не еби себе мозг, купи два новых диска в два раза больше и сделай себе честный RAID 1.
Истина. Если винда не обязон - еще бы перекатиться на линупс и накатить ZFS, чтобы не ебать себе мозги, что там и где не читается. По ночам 2 раза в неделю скраб сделаешь.
>По ночам 2 раза в неделю скраб сделаешь.
В месяц.
Да я думаю либо sas диски, либо u.2 ссд интеловские взять, если смогу рейд контроллер по дешевле найти, сата действительно уже пиздец в 2019 держать в рейде на сервере.
Просто денег не так много, но думаю собрать рейд на sas дисках хватит.
Несколько ламповых советов ОПу.
Первое - перед любой возней с рейдом сделай бэкап РУЧКАМИ!
Второе - НАХУЙ RAID5!!! Для файлопомойки - только 10-ка или 1-ка.
Третье - винты в серваках = расходники. Всегда держи в запасе винт подкинуть вместо дохлого в рейд.
Почему рейд 5 такое говно по твоему? Чем он хуже того же рейда 1?
Тому что медленная хуйня придуманная для экономии копеек.
Все дешевые железные рейд-контроллеры - говно. Все дорогие - дорогие. Ваще не туда смотришь.
> сата действительно уже пиздец в 2019
Чего пиздец-то? Давай как-то сопоставляй свой остальной конфиг. У тебя два БП? У тебя ИБП? У тебя ECC? - Хотя бы по одному пункту нет? Ну тогда SATA - не самая твоя большая проблема. Да, она будет подтормаживать, когда диски начали давать задержки. Ну так блядь поменяй диски и всё. Купи два новых трёхтерабайтника и поставь их в зеркало.
Плохо себя чувствует на мелких операциях изменения данных. Охуительно стрёмно ребилдится в случае потери диска. Точно, 100% не для чуваков, чей рабочий объём данных всего лишь 2 тера.
Raid5 говно из-за его ненадежности. Если будут повреждены 2 сектора на разных дисках, он не восстановится. А вероятность такого проишествия, когда у тебя 5+ дисков довольно высока. На практике происходит так:
сломался диск в массиве
@
ну, ничего, ведь у меня raid 5 :coolface:
@
поставил новый диск, запустил ребилд
@
Sector read error. Rebuild fail. :trollface:
Обоснуй.
>у тогда SATA - не самая твоя большая проблема
САТА сегодня, это как конь в сравнении с электрокаром.
>Чего пиздец-то? Давай как-то сопоставляй свой остальной конфиг. У тебя два БП? У тебя ИБП? У тебя ECC? - Хотя бы по одному пункту нет? Ну тогда SATA - не самая твоя большая проблема. Да, она будет подтормаживать, когда диски начали давать задержки.
Кто тут говорил про узкие места??? Тут задачи детально не расписаны, общий конфиг ОП опустил, значит с задачами справляется. Тут проблемы с подсистемой памяти.
Решение данной проблемы с задачами что бы "раз и навсегда" требуется радикальное. ИБО:
1. Юзать под горячие данные механические ЖД это дно дна гроб кладбище пидор. Это максимум приемлемо с теплыми данными,и то, только SAS на 10к винтах. Холодные данные, тут да, LFF SAS объемом побольше, дабы все бэкапы влезали.
2. Не зачем обрезать себе потолком те возможности подсистемы которые могут понадобиться в будущем. Потому говорю что лучше брать корпоративный SSD SAS или U.2 на TLC NAND c DWPD равной единицы и функцией PLP. Это позволит забыть о возможных проблемах с подсистемой на ближайшие 10 лет. SAS или U.2 решать самому, если не предполагается использование б\у 10к дисков, то можно не жалеть и юзать только U.2.
Да дорохо, да можно по проще, но безгеморойность куда дороже и ценнее.
Что конкретно купить???
1. Контроллер, - единственная дискретная штука с вменяемыми характеристиками, по скольку рейд уже не нужен, бери HBA, значит Broadcom 9400 8i.
2. К нем уберешь кабель аля SFF-8643 -> SFF-8639 (https://www.amazon.com/Funtin-SFF-8639-Mini-SAS-SFF-8643-Cable/dp/B01COOQ3MS)
3. Сам накопитель, 1.92 TB - https://www.span.com/product/Samsung-SSD-PM983-OEM-MZQLB1T9HAJR-00007-2-5-U-2-NVMe-1-92TB-SSD~68219
В общем цена вопроса $1000.
> Юзать под горячие данные механические ЖД это дно дна гроб кладбище пидор
Бгг, блядь. Столько лет жили только на HDD и умели обходиться. А теперь всё, нельзя. И даже какому-то смолл-бизнес крокодилу с подстольным сервером тоже почему-то нельзя.
>В общем цена вопроса $1000.
Долбоеб, у него весь "сервер" столько стоит. Ты вылезай из своего манямирка с 10k RPM-дисками, и уши просуши от мочи вендоров.
Ему нужно максимум два SATA-диска и (если хочет потратить деньги) NVMe в M.2 для кэширования. Этого ему хватит еще лет на пять до следующей замены дисков.
>Бгг, блядь. Столько лет жили только на HDD и умели обходиться. А теперь всё, нельзя.
охуенно жили, блять, каждые три года подавай новые накопители, бэды, ремапы, ребилды, охуеть как надоело.
>Долбоеб, у него весь "сервер" столько стоит.
Да мне насрать на его "платформу", хочет не ебаться и по взрослому? написано выше.
>охуенно жили, блять, каждые три года подавай новые накопители
SAS-диски тоже бэдами покрывается, у них такая же механика и пластины как в SATA. Прекращай уже дрочить на СЭРВЕР-ГРЭЙД ИНТЕРПРАЙЗ ХАЙПЕРКОНВЕРЖЕНТ СОЛЮШНЗ, заебало.
>хочет не ебаться и по взрослому?
Это точно не к тебе, фанбой. Еще EMC или NetApp начни продавать тут.
>SAS-диски
Аутист походу тут ты. Я про SAS\U.2 SSD
>Еще EMC или NetApp начни продавать тут.
Чем они тебе плохие? Расскажи как они тебе испортили жизнь, лол.
Обязан!
Твой диск в норме, но перегревается.
>SAS-диски тоже бэдами покрывается, у них такая же механика и пластины как в SATA. Прекращай уже дрочить на СЭРВЕР-ГРЭЙД ИНТЕРПРАЙЗ ХАЙПЕРКОНВЕРЖЕНТ СОЛЮШНЗ, заебало.
Посаны ну вы чего? Механика уже прошлый век. Все нормальные и адекватные админы уже давно переезжают с нее на SAS\U.2 SSD.
>Юзать под горячие данные механические ЖД это дно дна гроб кладбище пидор.
Два самовара чаю этому джентельмену.
Могу принести тесты пикрелейтеда всем заинтересованным. Их буду делать завтра. А так пишите чем и как именно интересно будет сие дивайс потестить.
И сколько стоит такая хуёвина, 80к?
Вангую это б/у c ebay за 20к
с выработанным ресурсом и перешитыми метриками
>И сколько стоит такая хуёвина, 80к?
Лол, $1,600 без ндс и растаможки. 4x 10k hdd на 2.4 TB обойдутся в $1400. То что выбор очевиден.
>Вангую это б/у c ebay за 20к
>с выработанным ресурсом и перешитыми метриками
Легко проверить же. 27 Mar 2019. По тесту выдал куда больший результат в рандом записи\чтении 4kb 1QD по сравнению с того же объема сосунговским PM1633a конца 2017 с 64 слойной TLC на борту, то что тут 96 слойная BICS4 TLC 512 гбит. а значит не б.у.
И кстати банка почему то напоминает ту, что у интеловского оптана стоит, а разъем тоже, контактов тут на SFF-8639 хватит, не только на SFF-8482. Жаль нет сервера или материнки с поддержкой U.2, вдруг контроллер двух режимный то на этом ssd.
Есть один сервер на заводе, на нём крутится пятый рейд (intel rapid) и вот сегодня мне пожаловались на скорость открытия файлов, которые лежат соответственно на сервере. Я полез смотреть в чём дело, и наткнулся на возможную проблему (обратите внимание на второй скрин в параметр "включение"), причём сам интел рапид показывает статус рейда как хорошее. Скорее всего это и есть проблема медленной работы рейда, по крайней мере такого быть не должно. Реквистирую мысли анонов по поводу причины такого поведения, сам думаю на счёт питалова, но проверить сейчас офк не смогу, люди пока работают, но и сидеть до поздна тоже не в кайф, поэтому пришёл сюда услышать мысли анонов, поэтому прошу накидать возможных причин, что бы я сразу же их проверил.
Спеки сервера:
i7-4770k, мать asus z97-k, 16gb ddr3, raid-5 из трёх двух-терабайтных сегейтов, ещё один двух-терабайтник под бекапы (офк бекап дублируется и в облако тоже) и ссд евошка 850 на 250гигов, на сколько бп не знаю, внутрь полезу после того, как офисники уедут домой.
P.S. блессрнг не разводите хитачи-вд-сигейто срач. Конструктивный хуесосинг ОПа приветствуется