Data scientist на удаленную работу

В компанию занимающуюся оптимизацией цен требуется data scientist на полную ставку. Работа удаленная. Ваша работа: разработка алгоритмов динамических цен, работа с командой компании по интеграции алгоритма в рабочую среду (production), с последующими поддержкой, дебагингом, и файн-тюнингом.

Общение с командой - в основном письменное, на английском языке.
Минимальные знания: питон + scikit-learn, знание какие алгоритмы существуют в scikit-learn, как они работают, когда и как их использовать.

Заинтересованны?

Напишите по-английски пару слов о себе, CV, линки на проекты и предполагаемая зарплата [email protected]

 data science, удаленка

---

Check Point

Подскажите какой антивирус поставить чтобы пропали предупреждения (ClamAV не помогает) и почему активный фаервол ufw не помогает?

Результаты проверки безопасности
Требования к безопасности Статус безопасности Решения
Правило антивирусных программ
Предупреждение
Portal administrator requires you to have anti-virus application running and updated within the last 2 weeks.
Правило брандмауэра
Предупреждение
Portal administrator requires you to have firewall application running.

 clamav, ufw

---

Хранилище или СУБД для множества blob данных

Просьба посоветовать, что посмотреть из дисковых хранилищ/key-value СУБД со следующими требованиями:

• Хранение blob значений по ключам или путям (число или строка, не важно).


• Сущностей для хранения много (порядка 10 млн), все они - бинарные блобы разных размеров - от 100Кб до 1Гб.


• Нужен быстрый random-access на чтение/запись. Намного быстрее, чем хранить каждую из сущностей в виде отдельного файла в фс (это проверено, очень медленно при росте числа файлов).


• Все хранится на одной машине, не распределенно


• Не слишком большой оверхед по занимаемому месту на диске


• С или C++ API

Копалось в сторону штук типа leveldb, проприетарных хранилищ и собственного велосипеда, все показывает сильное падение скорости доступа при росте числа значений или просто константно-низкую скорость (порядка 0.1 от скорости диска)

 big data, c++, db, storage

---

Установка Debian на Raspberry pi 4

Добрый день. У кого-то есть ссылка на инструкцию как накатить Debian на Raspberry pi 4? В интернете нахожу только как устанавливают специальные «малиновские» сборки помойму не с iso даже. Но на самом Debian сайте нашел подходящий iso образ под arm64.

 debian, raspberry pi

---

LineageOS 16 и блокировка экрана при звонке

Собственно вопрос в сабже. Работает как-то неадекватно.

При звонке (не важно входящий или исходящий) при приближении телефона к башке экран тухнет, как и положено. Но потом, походу, активируется, потому что каждый раз после звонка я обнаруживаю, что понатыкал ушами в телефоне много чего интересного: самый топчик был, когда при важном звонке включился полетный режим.

Вопрос - как починить? На родной прошивке такого не было, что логично. Настройки все перерыл, ничего не нашел.

Аппарат: Galaxy A5 2017, поддержка линейки «официальная», не васянская сборка.

Во всем остальном работает все отлично, никаких глюков замечено не было больше.

 lineage os

---

Как обновить Ubuntu до 20.04

Недавно вышла новая версия Ubuntu с длительным сроком поддержки - Ubuntu 20.04. Согласно информации на официальном сайте она будет получать обновления безопасности до 2025 года. В новой версии мы уже привычно получим обновление программного стека, новую версию Gnome и внешний вид. Более подробно о том, что нового в Ubuntu 20.04 можно посмотреть в отдельной статье. А сегодня мы поговорим о том, как обновить Ubuntu до 20.04. Примечательно, что у вас нет необходимости ставить промежуточные версии 19.04 или 19.10. Если вы использовали LTS релиз 18.04, то можете обновится прямо с него. Процедура обновления мало чем отличается от предыдущих лет. Обновление Ubuntu

Запись Как обновить Ubuntu до 20.04 впервые появилась Losst.

@темы: Инструкции

---

Релиз дистрибутива Manjaro Linux 20.0

Представлен релиз дистрибутива Manjaro Linux 20.0, построенного на основе Arch Linux и ориентированного на начинающих пользователей. Дистрибутив примечателен наличием упрощённого и дружественного пользователю процесса установки, поддержкой автоматического определения оборудования и установки необходимых для его работы драйверов. Manjaro поставляется в виде live-сборок с графическими окружениями KDE (2.9 ГБ), GNOME (2.6 ГБ) и Xfce (2.6 ГБ). При участии сообщества дополнительно развиваются сборки с Budgie, Cinnamon, Deepin, LXDE, LXQt, MATE и i3.

---

Ада: исключения и безопасность

Про Аду еще не забыли?

Известно, что исключения в C++ с одной стороны упрощают обработку нештатных ситуаций, а с другой стороны делают программный код часто сложнее, потому что такой код уже должен поддерживать «гарантии безопасности», что составляет определенную сложность для языка без сборки мусора (GC). Очень много нюансов.

Исключения в Аде появились раньше, чем в C++. Они были уже в стандарте 83-го года. Это была одна из продающихся фишек первого стандарта языка. Как поддержка исключений соотносится с безопасной средой исполнения кода? В Аде есть элементы GC? Там что-то было про подчищение памяти еще в стандарте 83-го года, но я уже давно все забыл.

Гарантируется ли в Аде безопасность на базовом уровне? Не может ли брошенное исключение привести к утечке или какому другому дефекту в памяти? Если нет, то как это соотносится со скоростью исполнения кода?

 ada

---

ld как добавить не установленную библиотеку в проект?

Доброго здравия.
Гуру, подскажите, как добавить библиотеку к проекту?

Пробовал таким образом:

gcc ... -Wl,-l../lua/lib/liblua.a -o myexeprog

Говорит, что не может найти:

/usr/bin/ld: cannot find -l../lib_lua/C_Source/lua/lib/liblua.a

При этом ls на это же назначение - видит, отображает.

Пытаюсь собрать старый проект года так 2006 с Lua 4, поэтому вариант поставить библиотеку в систему - не очень. Как его(gcc) попросить, чтобы он меня понял?

Вся строка запуска (убрал только портянку объектников):

gcc -lm -B../lib_lua/C_Source my_lua.o -Wl,-l../lib_lua/C_Source/lua/lib/liblua.a file1.o fileN.o main.o -x c /opt/C_Source/file.c -o lane

gcc -v надо? Действо происходит на Raspberry Pi.

 gcc, linker

---

Как себя будет вести Линукс на этом ноутбуке?

Привет всем , как думаете адекватно Линукс (а конкретно Ubuntu 18.04) будет себя вести на этом ноутбуке https://www.citilink.ru/catalog/mobile/notebooks/1175132/?utm_source=xml_ymarket_nvs&utm_content=1175132&utm_medium=cpc&mrkt=nvs_cl&utm_campaign=Notebooks&utm_term=3_LENOVO_81UT007GRU&frommarket=&ymclid=15879609483714810436200001 ? Если у кого есть такой отпишитесь пожалуйста. Не очень хочется потом с бубном плясать много

 вопрос

---

Можно ли примонтировать несколько накопителей данных к одному каталогу?

Я новичок в Линуксе и не имел двух жестких, поэтому заранее извиняюсь за вопрос. Я хочу прикупить SSD на 500 ГБ, и если потом не хватит его, то еще и жесткий на 1 ТБ. Можно ли провернуть что-то типа такого или нет:

mount /dev/sda1 /mnt/home
mount /dev/sda3 /mnt/home

Или надо будет еще что-то делать? И как этого реализовано на серверах, где тысячи жестких дисков?

UPD: погуглил про RAID и LVM

 mount

---

Cannot load the ionCube PHP Loader

Cannot load the ionCube PHP Loader - it was built with configuration API320151012,NTS, whereas running engine is API320170718,NTS
No Loader is installed, please try to run this command or contact support: sh /scripts/update_ioncube restart

Starting cwp-phpfpm: Cannot load the ionCube PHP Loader - it was built with configuration API320151012,NTS, whereas running engine is API320170718,NTS

как профиксить?

 php

---

Визуализация данных

Привет всем. Как лучше визуализировать очень-очень большой двумерный (обычный в котором 2 оси x и y) график, без всяких многомерных проекций? Чтобы был понятен масштаб - скажем он начинается от полутора миллиона точек до 20-30 миллионов, значения тоже колеблются нехило (десятки миллиардов типичные значения). Хочется на него глазками посмотреть, есть ли в нём какие-то закономерности, вроде синусоиды и так далее, при том я не знаю масштабов на которых они будут видны (теоретически обязаны быть, но на практике...) Так что хочется чего-то, что можно маштабировать. Желательно из кода на Python-е. matplotlib навевает на меня тоску, он с более маленькими объёмами тонет в производительности, надо самому ручками выбирать тогда какие точки рисовать, ну и никакого масштабирования, а хочется чего-то умного, что не будет лишние точки рисовать.

Да, мне ещё гладкость глазками бы посмотреть, нет ли пиков каких-то, а если есть, то их характер, повторения и т.д.. Можно конечно для поиска скачков производными обмазываться, но не очень хочется в слепую бродить.

 python, визуализация, графики

---

Как рядовой линуксоид добывает товары из-за рубежа без доставки в РФ?

Знаю про бандерольку, но наверняка есть ещё варианты?

 доставка

---

Нигерийские письма с сервисного ящика яндекса

За время мирового ппца мне уже несколько раз приходит подобное письмо: https://imgur.com/a/GG4XNpF

Во всех случаях в качестве отправителя значится адрес [email protected], и он помечен как подтверждённый. Как им удаётся выдавать себя за яндекс?

 email, спам, яндекс

---

Mpv. Переключить в режим аудио

Есть ли команда или способ, чтобы переключиться в режим «только аудио» в процессе воспроизведения видео? Т. е. отключить видео-поток, оставив воспроизводиться звуковую дорожку, не перезагружая плеер.

И да, речь о воспроизведении видео с youtube

 mpv

---

Простая геометрия. Педметы на прямой.

Вот я решаю задачу про определение, какие из элементов находится на прямой.

Конечно же всё не очень просто. Все элементы с какими-то отклонениями по координатам. Но нужно найти те, которые находятся именно наиболее на одной прямой.

Нет. Не каждые два элемента конечно, а так чтобы была выявлена «прямая» относительно большинства находящихся на этой «прямой» элементов.

Добавлю, что большинство элементов (например 6 из 10) находятся вполне точно относительно прямой, а остальные могут ощутимо отклоняться.

Есть ли быстрые и точные алгоритмы решающие подобные задачи?

 алгоритмы

---

уменьшение раздела ssd диска для установки Линукс-а

Добрый день!

Давно не работал с windows, возникла проблема.

Есть ssd одним разделом, около половины места на нем — свободно. Однако средствами windows раздел уменьшить нельзя — нужна дефрагментация. Дефрагментацию для ssd стандартными средствами сделать нельзя.

Gparted вроде позволяет «откусить» до последнего занятого блока на диске, — это 1 гб (а откусить нужно 50, и это меньше свободного места на диске).

Как эти 50 откусить без потери данных на диске?

Какой сейчас стандартный выход из этой ситуации?

Заранее спасибо!

 gparted, ssd, ubuntu

---

Как systemd монтирует lvm-разделы? (хочу без fstab)

разделы lvm не монтируются при загрузке, с сообщением (для mount-юнита) в логе о том, что зависимость подкачала. А для device-юнита в логе пишет, что таймаут.

примерно так:
https://unix.stackexchange.com/questions/556819/systemd-time-out-waiting-for-device-dev-mapper-vg

По совету со stackoverflow я сделал device-юниты в виде явных файлов, однако пример со стековерфлоу содержит секцию [Service] а моя система ругается, и говорит, что в device-юнитах такой секции быть не должно и она проигнорирована.

я создал 1 файл mount, 1 файл device, добавил их командами systemctl enable, и мой lvm-раздел всё ещё не монтируется (корень тоже lvm-раздел, но он монтируется, потому что он монтируется по-другому из initramfs).

читал то - https://www.freedesktop.org/software/systemd/man/systemd.mount.html и это - https://www.freedesktop.org/software/systemd/man/systemd.device.html

Были такие темы и на LOR -
Монтирование lvm разделов вsystemd
интересно, разобрались ли с ними по-существу, а не обходными манёврами, как здесь - Запуск системы с разделами на LVM ?

Пробовал выполнять запуск юнитов из консоли без перезагрузки. Поведение такое же - таймаут у device, не монтируется у mount-юнит. Если руками выполнить команду mount, то systemd индицирует, что mount-unit запущен. Его можно остановить и он размонтируется. А сразу после этого обратно запустить не получается.

Что и куда мне надо прописать в этом вашем systemd, чтобы стало хорошо?

 mount, systemd

---

Apache + webdav подружить с windows webclient

Предыстория:
Пытался сначала подружить nginx webdav с виндовым клиентом. Из коробки - беда. После применения конфига из статьи(http://netlab.dhis.org/wiki/ru:software:nginx:webdav) почти все работает, кроме того что офисные доки в MS Office открываются только в режиме чтения(нужна поддержка PROPPATCH, а её у nginx-а нет). В итоге юзерам неудобно таскать доки туда-сюда для редактирования.

Debian Buster + Apache 2.4.38.
Из коробки примерно то же самое, что и с nginx.
При подключении сетевого диска не копируются файлы на сервер, а так же если открыть файл в MS Office, то нет возможности сохранить в нем изменения(стало лучше чем c nginx - открывает не в режиме чтения, но при попытке сохранить вываливает ошибку). Конфиг рабочий - например на той же винде cyberduck работает корректно. Очевидно, что проблема в виндовом клиенте.
Так вот собственно вопрос: есть ли возможность закостылить все это на Apache, как в статье, написанной для nginx? Спасибо.

 apache, webdav, windows