Собираем сервер мечты из того что есть, гоним ссaными тряпками буржуев, хвастаемся билдами, бугуртим, делимся с ньюфагами лютыми костылями смекалкой и спичечножелудёвой мудростью. Чем больше скотча, изоленты и сомнительных решений тем душевнее. В свете последних событий активно переходим на железо c помойки складских запасов Xi. Твёрдый камень, много нить, сильная работа. Удар!
Для 90% хотелок с головой хватит обычной китайской мини-пекарни с N100 типа Beelink Mini
Если вы уверены, что ну вам-то её точно не хватит, то, прося совета в этом треде, указывайте, чем конкретно вы собираетесь заниматься на вашем будущем сервере, какая примерно нагрузка ожидается, какой примерно объём хранилища нужен
Разница между серверным и обычным железом
Серверное железо - это громко, горячо, и дорого. сервера предназначены для работы в специальном помещении, где постоянно работает кондиционер и где нет людей, поэтому они орут кулерами как взлетающий реактивный самолёт, в домашних условиях вы oxyeeте от шума.
Хотя вышесказанное актуально только для 1U и отчасти 2U, начиная с 3U сервера уже относительно тихие. Но есть другой нюанс: начиная с 3U сервера пиздeцки тяжёлые, потому что серверные корпуса делают из толстых железных листов, а не из бэушных консервных банок, как корпуса для обычных пекарен.
Также в мире серверов царит копирастия и вендор лок-ин: с большой вероятностью сервер одного бренда откажется работать с PCIe картой другого бренда, а то даже и с жёсткими дисками другого бренда.
Но есть и плюсы: подавляющее большинство серверов поставляется с удобным удалённым управлением - IPMI - можно управлять питанием, переустанавливать шиндошс операционную систему, настраивать биос, и всё такое прочее, без монитора и клавиатуры, а воткнув в сервер один лишь сетевой кабель.
Разница между брендами и серверами.
Если очень хочется настоящую® серверную™ платформу© без особого пepдолинга, то купи Supermicro или ASRock - в отличие от остальных серверных брендов, у этих железо в основном совместимо с десктопным - используется стандартное ATX питание, стандартные четырёхпиновые кулеры, стандартные форм-факторы материнок. То есть можно собрать настоящий© сервер™ в обычном десктопном корпусе.
Если всё-таки хочется ынтырпрайз©®™ и готов немного пoпepдолиться - то бери Dell, это самые распространённые сервера среди пepдоликов и красноглазиков, поэтому для них продаётся куча запчастей на барахолках и по этим серверам дофига информации в интернете (читай "основные проблемы известны и для них уже придуманы костыли")
Самая "народная" модель - Dell R730 или Supermicro CSE-826 / 827 / 829 с двенадцатью хардами 3.5"
Сервера HP и Fujitsu - на свой cтрax и риcк - они распространены намного меньше, информации по ним практически нет (особенно по Fujitsu), с запчастями тоже могут быть проблемы.
Ни в коем случае не бери "труЪ ынтырпрайз" - Oracle, Sun, Cisco, IBM.
По поколениям серверов: нежелательно покупать Dell старее 13го поколения, Supermicro старее 11го, HP старее 9го, то есть модели с DDR3 и более старые.
> У меня был сервак в датацентре на зионе ебаном то ли 2012 то ли 2013 года под один клиентский проект. Еле шевелился. Сменил его на чуть менее некро i9-9900x, разница небо и земля просто. Что самое смешное, аренда i9 еще и стоит дешевле, а энергии он жрет меньше. Динозавр 2008 года сейчас разве что для отопления комнаты зимой сгодится.
Часто задаваемые вопросы и ответы, и полезные цитаты из предыдущих тредов
> сап двач мур мур мур мур, я хочу скачать весь интернет, нужен сервер с 8+ дисками, какой купить?
8-12 дисков можно и в обычную пекарню запихнуть, но понадобится "разветвитель", точнее "HBA controller".
подойдёт и "RAID controller", но читай описание контроллера - он обязательно должен поддерживать "HBA mode" или "IT mode", то есть прозрачно прокидывать диски в операционную систему, а не собирать рейд массив самостоятельно. Если очень нужен hot swap, то гугли вышеуказанные корпуса supermicro 2u 12x lff или бери народный Dell R730
> чёто в описании везде указывается SFF/LFF (нахуя так писать?)
чтобы тебя запутать. SFF = small form factor = 2.5", LFF = large form factor = 3.5"
> сап двач, хочу 10 гигабит, а на авито столько вкусных предложений Intel X520...
Не надо, лучше поищи Solarflare SFN7122F или новее.
Solarflare менее привередливые, чем интелы, жрут почти в 2 раза меньше электричества и соответственно меньше греются, lm_sensors умеет собирать с них кучу информации (пятнадцатилетний Intel X520 даже температуру не показывает)
ещё говорят, что Mellanox ConnectX-3 (и новее) тоже годные, но я не проверял.
> Где в необъятной продают норм корпуса 3-4u для ATX?
Etegro и супермикра стандартные корпуса
> Посоветуйте дешёвый сердитый шкаф.
не подскажу конкретные модели, но подскажу по глубине: НЕ бери шкафы глубиной 60см, это шкафы для короткого СЕТЕВОГО оборудования типа умных свичей и роутеров, шкафы для СЕРВЕРНОГО оборудования начинаются от 100см.
> подскажите как я могу приколхозить SAS-диск
Вариантов кроме контроллера нет
Самые дешевые и распространенные контроллеры ищи на авите по названию чипа - LSI 2008, там тыщи моделей. HBA в объявлении не суть, они перешиваются туда и обратно.
Хотя наверное сейчас надо искать LSI 3008, 2008 слишком старые, а ынтырпрайз уже переезжает на современные контроллеры и сливает устаревшие LSI 3008 на барахолки.
Важно: в прошивке LSI 3108 нет реального режима HBA, в отличие от LSI 3008, и поэтому там приходится по отдельности каждому диску включать режим JBOD, чтобы ось их увидела. Возможно в LSI 2108 так же, точно не знаю.
> прокинуть диск в систему из железного рейда LSI SAS2108 / SAS3108
https://2ch.hk/hw/res/7132612.html#7210795 (
М)https://arhivach.hk/thread/1105552/#7210795
> софтовый RAID - сила, хардварный - могила
> но у нормальных брендов в прошивке контроллера можно изменить режим его работы с RAID на HBA
> где проёб с хуананами и зеонами если у тебя не серьёзный энтерпрайзный прод?
> У меня вчера после поста ... отвалился второй проц на мамке. Сколько я не искал причину, не читал гайдов и не спрашивал что делать, второй проц мамка не видит в упор, вместе с половиной памяти. Боюсь что я теперь понял где проёб.
> кстати да, надо ещё добавить в шапку, что ARM - это гроб гроб кладбище и далее по списку.
> Основные важные пакеты и программы под ARM64 / ARMv8 есть, но при любом шаге в сторону оказывается, что ничего нет.
> а по домашним упсам какая база?
база - это чтобы он управлялся по LAN или USB и поддерживался вот этим софтом https://github.com/networkupstools/nut/
> Бросил попытки ебаться с ZFS. Никакого профита от неё нету обычному уёбку селфхостеру. Я сдаюсь.
> ZFS на консьюмерских дисках это пиздец английское лото. С производительностью там полнейший атас.
> ZFS - это хрестоматийный пример "it works until it does not", когда столкнёшься с чем-то нетипичным, начнётся "у меня такая же нога и не болит"
> Короче положняк треда: все любим ZFS. Без проксмокса сервер не сервер, в крайнем случае трунас (тоже с зфс).
> XFS теоретически лучше работает с большим количеством мелких файлов , но у меня с ней были серьёзные проблемы, а на форумах и прочих сосачах сусодмины в свитерах наперебой рассказывали, что такого не бывает и что мои проблемы не проблемы, поэтому я забил хуй на XFS и вернулся на медленный EXT4, n лет полёт нормальный
> и не забудь указать, что HP - контора мочи говна
> в очередной раз заебавшись с глюками HP и наобщавшись с макаками, не вникающими в суть вопросов и отвечающими копипастами по скрипту, я осознал, что единственный ынтырпрайз в мире серверов - это делл. там и прошивку к одному конкретному девайсу скачать можно, вместо выкачивания 4.3гб исо образа у хп (с обязательной регистрацией, конечно же), и документация нормальная вместо маркетингового буллшита, и на тикеты отвечают техники вместо макак. не покупайте хп, посоны, вы матерям ещё нужны.
> The fan noise is HPEs way to punish users that don't buy HPE hardware. They have been doing this for many years, and their supporters just act stupid and send you an a wild goose chase updating drivers, updating software and so on to tire you out and give up. The reality is that they do this knowlingly on purpose to annoy you
Предыдущий тред: >>7220058 (OP)
Шапка треда: https://0bin.net/paste/Kfh5-pJl#qSvFtERsIxvAkjLleN13QA9QqEBcWK1erw3T7Deh3xj
Архив тредов: https://pastebin.com/7SAYG8J7
░░░░██╗░██████╗██████╗░██╗░░░██╗
░░░██╔╝██╔════╝██╔══██╗██║░░░██║
░░██╔╝░╚█████╗░██████╔╝╚██╗░██╔╝
░██╔╝░░░╚═══██╗██╔══██╗░╚████╔╝░
██╔╝░░░██████╔╝██║░░██║░░╚██╔╝░░
╚═╝░░░░╚═════╝░╚═╝░░╚═╝░░░╚═╝░░░
В следующий раз исправите.
Что за корпус?
Я изначально и хотел сделать мост, но не знал, что оказывается в кинетике это такой костыль.
Кто бы мог догадаться, что что бы настроить кинетик в режиме моста, надо включить его в режиме ретранслятор и отключить вайфай.
И называется это режим адаптер.
Почему нельзя было оставить режим мост как у всех и включать его галочкой из меню для меня загадка.
Из побочных камней, теперь айпи устройств подключенных по мосту сканером видятся, но на дашборде роутера они без айпи адреса, как результат я не могу их зарегестрировать и применять правила.
В общем вроде как такие простые вещи работают, но плохо.
Посмотрю в будущем ещё на стабильность работы.
Дублирую в новый тред.
3 Кб, 508x64Нюфаг с микро-насом из прошлого треда врывается с платиновым вопросом:
А какая вообще нормальная температура для винтов? 33-36 норм?
Но осталось последнее - куда всё это засунуть? Хотелось бы супер маленький копеечный корпус какой нить.
от 0 до 60 по даташиту ВД для Вд Ред. но интуиция подсказывает, что ниже - лучше. И что это не линейная зависимость.
> Одноплатник
> 4 ХДД
А там точно хватит скорости для этого? Полагаю, все 4 диска вставлены в один порт.
Я всё починил на трунасе, и ещё у меня ломался opnsense после апгрейда на 25 версию, но я его тоже починил, переход на новые лыжи я пока отменил, то что сейчас есть уверенно работает, а бабки лучше вложу в другое, такие дела.
Вопрос: В какую сторону смотреть? Нужно ли мне то волшебное серверное оборудование, о котором тут говорят? Или проще закупиться двухсокетными мамками и 2011-3 зионами из зионотреда? Или что-то ещё?
Твоя залупа горизонтально скейлится? Если да, то забей на любые попугаи и бери самое дешевле в нужном количестве.
Если не скейлится, то ты и твои друзья - долбаебы, а серверы не про это вообще.
мимо-девопс-200лет-опыта
Слишком мало инфы. Что за задача какие инструкции нужны/могут ускорить расчёты. Какие ограничения, только бюджет или и количество машин? Так-то по цена/попугай 2011-3 самые выгодные но уже старые. Если есть ограничения на количество машин, то можешь попробовать посмотреть на эпики, но там под 100к цена будет за БУ, возможно тебе будет лучше взять БУ потребительский проц, ну или переписать софт под ГПУ
А что, сервера - это теперь не про HPC?
>>8106
CPU-bound научные расчёты. Часть софта относительно новая, типа ORCA. Часть старая, из прошлого десятилетия. Ни то, ни то, afaik, ничего выше AVX2 не использует.
Параллелится обычно через всякий MPI. Масштабируется с числом ядер довольно хорошо, поэтому и обратил внимание на двусокетные зионы. На несколько нод никогда раскидывать не пробовал и не планировал; каждую отдельную задачу всегда считал на одном компе.
На эпики смотрел, но только в своих влажных мечтах, они какие-то неадекватно дорогие в пересчёте на гигагерц-ядро. И тут мы снова возвращаемся к зионам...
Так сравни что-нибудь с чем-нибудь.
На OpenBenchmarking зайди, посмотри, что там похоже на твою математику.
Кстати топовые зивоны вроде 2699v4 до сих пор стоят больше 15к, лол, так что думой.
Двухсокетные мамки физически неудобный кал, подвальные уебищные, а фирменные неадекватно дороги для такой некроты (~20к), лучше с ними не связываться. Если придется все равно несколько пек для твоей научной фермы собирать, то лучше больше корпусов из мусора, чем ебля с засовыванием двухсокетных мамок в большие корпуса, установкой на них пары подходящих кулеров, расходами на БП, которые сразу два твоих профессора вытянут.
Он хочет с топового проца с ддр5 на ддр4 съехать, физику не обмануть. Там наверное если покопаться, можно найти для получше 32 ядра ддр4, но из-за цены идея однозначно фейл
https://openbenchmarking.org/test/pts/graphics-magick
ОП, ну ты и хуй, арт проебал, разметку проебал, ни одной фотки с орочьими технологиями не вставил, фу таким быть
мимо-ОП-прошлого-переката
ExeGate UNL* не бери
Аккумы внутри без отдельного отсека
Кабели к ним распаяны на плату
Serial протокол почти как cirrus, но не он, под NUT не заведёшь если сам не запатчишь
> Аккумы внутри без отдельного отсека
И да, чтобы их заменить - надо всё раскурить: N раз махнуть крестом и M шестигранником торцевым
Их же ULS* пока не трогал
Где raspberry pi сейчас лучше покупать в России?
Собираю свой первый нас, по отзывам в интернете решил остановиться на truenas scale.
Что могу сказать.
Это какая то дичь.
Как только установил у меня во вкладке приложения не было приложений, гуглил интернет, оказывается я не первый и не единственный с такой проблемой, в лучших традициях она решается переустановкой системы.
Скрин с оф сайта приложил.
Далее установка приложений, когда ставятся приложения они завистают в статус баре на 60%, если страничку обновить, то всё ок, но по мне так это ебала какая то, потому что если не обновлять будет логаут.
Из торрентов есть только трансмишин, йбит торрента в каталоге нет, как поставить я ещё не научился.
Далее работа с самбой, она ужасна и скорости ужасны, в конце концов смб вообще перестал быть доступным по локальной сети.
В общем этот ваш трунас пока не впечатлил.
129 Кб, 1644x662И по некстклауду не понял, где мне эти файлы взять и что с ними сделать?
Почему нельзя просто запуститься.
Я год назад на озоне по скидочке урвал. А так, на алике глянь цены, может там дешевле чем на других русских площадках (он теперь тоже на 80% из русских торгашей)
> Beelink Mini
Хочу домой что-то поставить, просто чтобы понаставить всяких штук для удобства типа nextcloud, стриминг музыки.
Но проблема в том, что места особо нет, тем более такого чтобы еще и витую пару кинуть туда, этого бы хотелось избежать.
В связи с этим вопросик. А стоит ли вообще смотреть в сторону подключения по wifi, чтобы сервер-комп просто стоял в углу где-то где только розетка есть?
И можно ли в сторону малинок смотреть или лучше взять этот Beelink Mini, который в шапке советуют?
И я вот думаю как поступить учитывая, что я хочу пользоваться многими штуками. Проксмокс поставить? Или просто линукс и там уже допустим докерами как-то контейнеры делать под каждый сервис нужны?
>UNL
>Аккумы внутри без отдельного отсека
Аккумы отключаемы? Вплотную к трансформатору прижаты?
Если да-нет, то похуй, я APC 1100 неразборный разбирал, который мне аккумуляторы сварил, сейчас в открытом состоянии трудится уже много лет, полёт ебейший.
В документации, лол. Тебе уже прямым текстом тыкают в файл где нужные конфиги подключаются, внеси туда доменное имя по которому сервак будет доступен
> Пердолинг
А мог бы просто поставить любимый дистр линукса и Докер Компоуз. Если боишься консольку, то любой графический менеджер, вроде Рэнчера, ДокГЕ, вотэва.
Самое дешёвое будет Интел.
Хочу 2 диска реданданси вместо одного. А то мало ли, что произойдёт.
Хотел бы BCACHEFS, но там до сих пор нет Erasure Coding и инструменты для восстановления ещё у зародыше.
> Тоже Линукс
Это Болдженос с нескучным обоями и мокрописьками.
Хотя не буду спорить, что это проще, чем самому копировать текст в интернете для установки докера и выбора ГУИ, который тебе нравится.
> Нужна помощь
Ты какой хоть контейнер ставишь, от линукссерверио или официальный? В любом случае, зайди на гитхаб с этим контейнером и там все написано. Но тебе действительно просто нужно добавить доверенный домен, а именно айпишники докера и твой домен.
Хотя в целом, я бы рекомендовал использовать другие решения, нежели некстклауд. Для изображений на порядки лучше Immich, для календарей и почты например Baikal, для варенья файлов Filebrowser и так далее.
p40
Очевидно, в веб-интерфейсе тебе не дадут редактировать файлы, которые только админ сервера должен видеть. Так устроено, что иди в файловую систему и ищи этот файл.
41 Кб, 480x360У меня их "оригинальный" блок с более менее нормальной начинкой от FSP из 2019, но уже вижу два отзыва (сегодня видяха от МК - второй), что продающиеся сейчас блоки с начинкой 300W китайского говна.
> > > кстати да, надо ещё добавить в шапку, что ARM - это гроб гроб кладбище и далее по списку.
Всё настолько плохо? Вроде ж малинкам этим сто лет уже, решение довольно популярное.
>>8936
И что выбирать в итоге? Один пишет проксмос, другой линукс+докер.
А для каких кейсов использования проксмокс лучше будет? То есть в какой момент проксмокс еще оверкил и докер лучше, а в какой просто докер-композа уже не хватает и лучше будет проксмокс?
> А стоит ли вообще смотреть в сторону подключения по wifi, чтобы сервер-комп просто стоял в углу где-то где только розетка есть?
Бумп.
>что выбирать
Два мира, два Шапиро.
На мини пердольках терять расходные на виртуализацию как-то не ок. Тот анон предлагает экономить на вложенных усилиях и не заниматься лишними вытанцовками.
С другой стороны, у тебя явно не хайлоад, если тебе кажется так организовать удобнее лично для тебя - почему бы и нет.
> Всё настолько плохо? Вроде ж малинкам этим сто лет уже, решение довольно популярное.
> > Основные важные пакеты и программы под ARM64 / ARMv8 есть, но при любом шаге в сторону оказывается, что ничего нет.
> А для каких кейсов использования проксмокс лучше будет?
когда надо винду запустить, например
>>9472
да подключай, кто тебе мешает? кроме стен и мощных соседских роутеров, конечно.
> фирменные неадекватно дороги для такой некроты (~20к)
Можно поступиться совестью и взять ленову за 5-5.5к
На счёт самбы сомнительно, там же дефолтная линуксовая реализация под капотом. В тестах с нвме 10гбит канал забивается полностью при копировании с/на винду
Да-нет. Ну да: можно насверлить дырку для хвостов и вывести их наружу, положить аккумы на упс сверху, поставить 2x2 параллельно вместо просто двух, etc.
Строчки обновляются.
Перезагрузил с кнопки, он загрузился как обычно, потом про бридж написал, потом про нвидию, подозреваю это из-за приложений которые я устанавливал.
Что это значит?
И вы не злитесь на меня что я тупой, я просто только познаю это всё., а спросить не у кого. Все форумы куцые, типо введи строчку, в что она значит хз и куда её вводить.
> при копировании с/на винду
По какой-то неведомой причине, на старой винде, не поддерживающей третью самбу, подобных проблем не было. И между линухами. Думойте.
Впрочем для кинца с торрентов и стомегабитной некроты хватает, не каждый день усираешься и полный бекап харда перекидываешь по сети.
Дошкольник, не ругайся! Эта борда 18+.
Если нет случая, когда нужна именно виртуалка с другой ОС, то докер лучше. Если такая необходимость есть, то у тебя и выбора нет
592 Кб, 3794x1970>Хотя не буду спорить, что это проще, чем самому копировать текст в интернете для установки докера и выбора ГУИ, который тебе нравится.
Я если честно пока не искушен и у меня нет "любимых" дистрибутивов, просто погуглил как сделать нас, в железе я более менее понимаю(но под винду), интернет подсказал, что самое популярное решение это трунас, вот и ковыряю для общего развития.
>Ты какой хоть контейнер ставишь, от линукссерверио или официальный?
Ставлю из магазина тручарт.
>Хотя в целом, я бы рекомендовал использовать другие решения, нежели некстклауд. Для изображений на порядки лучше Immich, для календарей и почты например Baikal, для варенья файлов Filebrowser и так далее.
Та я не спорю, вот разбираюсь.
> Но тебе действительно просто нужно добавить доверенный домен, а именно айпишники докера и твой домен.
>Очевидно, в веб-интерфейсе тебе не дадут редактировать файлы, которые только админ сервера должен видеть. Так устроено, что иди в файловую систему и ищи этот файл.
Я хоть убей не понимаю куда нажать, что бы найти файлы которые надо редактировать, нет кнопки такой.
Интерфейс прикладываю.
>а счёт самбы сомнительно, там же дефолтная линуксовая реализация под капотом.
Есть подозрение, что это винда 11 тормозит на другой машине, были новости такие, я так же не одинок.
Внизу, где контейнеры перечислены, а рядом с ними три кнопки, они что делают? Я просто ТруНасом не пользовался никогда. В голой консолечке ты бы открыл докер компоуз файл, указал там путь к конфигу и в нем подправил.
Если хочешь, кстати, тени там на консолечке и в терминале найди и отредактируй нужный файл.
Вот это, кстати, не читал? https://forums.truenas.com/t/a-full-guide-for-installing-nextcloud-on-truenas-scale-with-collabora-integration-and-outside-access-through-nginx-proxy-manager/5874
> если тебе кажется так организовать удобнее лично для тебя - почему бы и нет.
Так для эттого нужен опыт, которого у меня нет. Без него на этот вопрос тяжело для себя ответить
>>9502
> да подключай, кто тебе мешает? кроме стен и мощных соседских роутеров, конечно.
Подключать то никто, но будет ли это адекватный результат выдавать? Я просто ньюфаг и вдруг окажется, что подключать сервер домашний к домашнему обычному wifi считается ублюдством и это работать нормально не будет и будут проблемы
Идея-- говно, конечно. Но если у тебя хороший вайфай приемник, мощный вайфай передатчик и чистый канал в доме, то норм.