metaclass (metaclass) wrote,
metaclass
metaclass

Странная оптимизация

https://github.com/twain47/Nominatim/blob/master/utils/setup.php#L395
$iInstances - количество работающих процессов, вычисляется как "количество процессоров-1".
Получается, что на постгрес отправляется параллельно несколько запросов, причем каждый запрос обрабатывает свое подмножество записей (условие osm_id % $iInstances = $i)

По идее, если запрос упирается в CPU (судя по нагрузке - таки да), это осмысленная оптимизация, если же в i/o, то выглядит это как-то странновато.

PS: впрочем там на вставку в placex обновляется gist индекс по положению + триггер placex_insert на пять страниц. Поэтому оно, похоже, адски CPU-bound.

Алсо, в 14.04 убунте уже 9.3 Postgresql и ему не нужно подкручивать kernel.shmmax, потому что https://wiki.postgresql.org/wiki/What%27s_new_in_PostgreSQL_9.3#Switch_to_Posix_shared_memory_and_mmap.28.29
Subscribe
  • Post a new comment

    Error

    Anonymous comments are disabled in this journal

    default userpic

    Your reply will be screened

    Your IP address will be recorded 

  • 5 comments