FreeBSD-EN-22:22.tzdata.asc FreeBSD-EN-22:28.heimdal.asc FreeBSD-EN-23:01.tzdata.asc FreeBSD-EN-23:04.ixgbe.asc (reboot) FreeBSD-SA-22:14.heimdal.asc FreeBSD-SA-22:15.ping.asc FreeBSD-SA-23:01.geli.asc (reboot)

  • Shulman
    link
    fedilink
    arrow-up
    0
    ·
    3 years ago

    у тебя рейд на механических дисках? если шина все время горит, там возможно проблема физичекая, или износ диска, или не праивльное управление которое приведет к износу диска… ты бы это провентилировал

    • cryptOP
      link
      fedilink
      arrow-up
      0
      ·
      3 years ago

      да все у меня там хорошо. у меня там линукс перед этим стоял с 2013 года.

    • cryptOP
      link
      fedilink
      arrow-up
      0
      ·
      3 years ago

      еще я, возможно, настройки этого рейда меня между сменой ОС. может, в этом дело. сложно провести сравнительные тесты.

    • cryptOP
      link
      fedilink
      arrow-up
      0
      ·
      3 years ago

      вроде решил я проблему с подтормаживанием диска и лагами звука. пока удалил слой с блочным журналированием (gjournal) нафиг.

      p.s.

      @odalist

      • odalist
        link
        fedilink
        arrow-up
        0
        ·
        3 years ago

        пока удалил слой с блочным журналированием (gjournal) нафиг.

        Очень интересно. Он по дефолту там был? Ты раньше его настраивал?

        • cryptOP
          link
          fedilink
          arrow-up
          0
          ·
          3 years ago

          нет, не по дефолту, я специально продумывал аналог lvm+xfs и даже успел протестировать во freebsd снапшоты с UFS, но потом меня отвлекло это и я уже забыл, как это должно было все работать.

          обрушения системы с dd были у меня вызваны переполнением gjournal, там фиксированный размер.

          тормоза и лаги, очевидно, тоже его задержками.

          сами адепты фрибзд говорят, что это устаревшая технология…

          • odalist
            link
            fedilink
            arrow-up
            0
            ·
            3 years ago

            Ну, ты сам виноват. Натворил фиг знает что. Всегда так бывает, когда начинаешь танцевать гопак на граблях.

            • cryptOP
              link
              fedilink
              arrow-up
              0
              ·
              3 years ago

              ну я вообще так-то инженер и привык придумывать решения. собственно потому я использую эти системы.

        • cryptOP
          link
          fedilink
          arrow-up
          0
          ·
          edit-2
          3 years ago

          во фряхе бардак. UFS - это три технологии журналирования:

          1. Soft-Updates (облегченный вариант)
          2. Soft-Updates + FS level Journaling (переусложненный по сравнению с линуксом, но дефолт)
          3. GEOM (block level) journaling. журналирует на уровне блоков сразу и данные и метаданные. это я и хотел использовать.
          witch ~ # tunefs -p /dev/XXX
          tunefs: POSIX.1e ACLs: (-a)                                disabled
          tunefs: NFSv4 ACLs: (-N)                                   disabled
          tunefs: MAC multilabel: (-l)                               disabled
          tunefs: soft updates: (-n)                                 enabled
          tunefs: soft update journaling: (-j)                       disabled
          tunefs: gjournal: (-J)                                     disabled
          tunefs: trim: (-t)                                         disabled
          tunefs: maximum blocks per file in a cylinder group: (-e)  4096
          tunefs: average file size: (-f)                            16384
          tunefs: average number of files in a directory: (-s)       64
          tunefs: minimum percentage of free space: (-m)             0%
          tunefs: space to hold for metadata blocks: (-k)            0
          tunefs: optimization preference: (-o)                      space
          tunefs: volume label: (-L)                                 home
          

          снапшоты фс не работают с (2). эту проблему все еще решают

          но мне не это нужно. мне нужен снапшот блочного девайса, а не fs.

        • cryptOP
          link
          fedilink
          arrow-up
          0
          ·
          3 years ago
          The performance degradation occurs when your zpool is either very full or very fragmented. The reason for this is the mechanism of free block discovery employed with ZFS. Opposed to other file systems like NTFS or ext3, there is no block bitmap showing which blocks are occupied and which are free. Instead, ZFS divides your zvol into (usually 200) larger areas called "metaslabs" and stores AVL-trees1 of free block information (space map) in each metaslab. The balanced AVL tree allows for an efficient search for a block fitting the size of the request.
          
          While this mechanism has been chosen for reasons of scale, unfortunately it also turned out to be a major pain when a high level of fragmentation and/or space utilization occurs. As soon as all metaslabs carry a significant amount of data, you get a large number of small areas of free blocks as opposed to a small numbers of large areas when the pool is empty. If ZFS then needs to allocate 2 MB of space, it starts reading and evaluating all metaslabs' space maps to either find a suitable block or a way to break up the 2 MB into smaller blocks. This of course takes some time. What is worse is the fact that it will cost a whole lot of I/O operations as ZFS would indeed read all space maps off the physical disks. For any of your writes.
          
          The drop in performance might be significant. If you fancy pretty pictures, take a look at the blog post over at Delphix which has some numbers taken off an (oversimplified but yet valid) zfs pool. I am shamelessly stealing one of the graphs - look at the blue, red, yellow, and green lines in this graph which are (respectively) representing pools at 10%, 50%, 75%, and 93% capacity drawn against write throughput in KB/s while becoming fragmented over time:
          

        • cryptOP
          link
          fedilink
          arrow-up
          0
          ·
          3 years ago

          сегодня проапдейтил сервер на F13.1, посмотрю, как работать будет. F13.0 глючил и вис.

          • odalist
            link
            fedilink
            arrow-up
            0
            ·
            3 years ago

            сегодня проапдейтил сервер на F13.1

            Интересно. Отпишись. Интересно будет почитать твои наблюдения.

            • cryptOP
              link
              fedilink
              arrow-up
              0
              ·
              3 years ago

              Интересно. Отпишись. Интересно будет почитать твои наблюдения.

              я только сервер проапдейтил пока. в этом ничего нет. либо будет работать, либо нет.

              теперь

              а) на сервере будут собираться пакеты для ф13 б) на рабочей станции (ws) я начал копирование данных в бекап.

              потом проапдейчу WS до ф13, создам ZFS пул на hardware raid, скопирую данные и посмотрю, что будет.

              • odalist
                link
                fedilink
                arrow-up
                0
                ·
                3 years ago

                либо будет работать, либо нет.

                Вот это меня и интересует.

                • cryptOP
                  link
                  fedilink
                  arrow-up
                  0
                  ·
                  3 years ago

                  чем больше проходит после релиза, тем нормальнее. сейчас уже ок должно быть. баг, который я репортил два года назад, пофиксили в апстриме.

                  13.1(!) patch level 6 уже должно быть ок.

                  • odalist
                    link
                    fedilink
                    arrow-up
                    0
                    ·
                    3 years ago

                    чем больше проходит после релиза, тем нормальнее

                    Поддерживаю.

                • cryptOP
                  link
                  fedilink
                  arrow-up
                  0
                  ·
                  3 years ago

                  меня больше интересует, как будет работать ZFS. я понял, что блочных снапшотов во FreeBSD нету, поэтому остается только ZFS, которую не рекомендуют сажать на hw raid и которая не выносит полного заполенения диска. мне интересно, удасться ли мне с этим что-то сделать.

                  • odalist
                    link
                    fedilink
                    arrow-up
                    0
                    ·
                    3 years ago

                    как будет работать ZFS

                    Я FreeBSD устанавливал с ZFS. И я ничего там не менял. И не проводил никакого тюнинга. Пока что, работает нормально.

                • cryptOP
                  link
                  fedilink
                  arrow-up
                  0
                  ·
                  3 years ago

                  короче, готовлю очередные грабли

                  • odalist
                    link
                    fedilink
                    arrow-up
                    0
                    ·
                    3 years ago

                    очередные грабли

                    Эксперименты-дело такое. Тут без граблей не обойтись.

          • TheAnonymous
            link
            fedilink
            arrow-up
            0
            ·
            3 years ago

            «F13.1 F13.0» В таком виде смотрится как код МКБ «Психические и поведенческие расстройства, вызванные употреблением снотворных или седативных средств»

            • TheAnonymous
              link
              fedilink
              arrow-up
              0
              ·
              3 years ago

              Интересно совпало, что беды с башкой кодируются буквой F ЗЫ с трекером что-то не то, время обновилось, а автор коммента почему-то crypt

              • cryptOP
                link
                fedilink
                arrow-up
                0
                ·
                3 years ago

                ЗЫ с трекером что-то не то, время обновилось, а автор коммента почему-то crypt

                да это все ерунда, главное, что моя тема в клубе наконец стала мне видна:) а остальные пусть будут хоть от санта клауса))

            • cryptOP
              link
              fedilink
              arrow-up
              0
              ·
              3 years ago

              В таком виде смотрится как код МКБ

              для меня нет) все привычные мне коды начинаются с 40ка)

              • TheAnonymous
                link
                fedilink
                arrow-up
                0
                ·
                3 years ago

                Надо чтоб FreeBSD переняли модель нумерации версий хромога и прочих