Загружаемые из сети файлы по списку, сохранять с именами порезанными через regexp.
Качаю, сейчас, так - xargs -n 1 curl -O < list
И он сохраняет имена в оригинале, есть regexp, для отрезания лишнего - ^(360p_\d+.ts).*.
Вот только использовать его как, придумать не могу.
Есть диск на 500, с NTFS. Винды на нем как и в системе в общем нет. Стал чистить, возникли подозрения на плохое здоровье. Программа Disks(UDisks2.1.3) показывает 500 - 498 свободных и 0,4% занятых. Анализатор - Baobab говорит что на диске данных только от .Trash-1000 и там 13 метров. Хотя выдает ошибку ввода/вывода при просмотре содержимого, одного каталога(предполагаю что там и лежат лишнии данные которые я не могу увидеть). df -Th показывает 1.9 занятых, 466 размер и 464 доступных. 1% использовано.
Бэдов нет, ремапа нет. Диск здоров, по смарту тоже все нормально, кроме ошибок чтения - 1 ID, = 45.
Вопрос в том имеет ли смысл парится и искать проблему сейчас, или переделать диск, хочу в ext4, это второй диск не системный.
На системном тоже почти все вычистил, буду переделывать, весь диск тоже, ввиду старых проблем(две системы одна с артефактами от 12.04 обновлена до 19.04, вторая 14.04).
Думаю если на 500, форматнуть имеет ли смысл запускать все проверки снова, смарт расширенный и поиск бэдов, или сначала решить проблему в этой ситуации?
Вот фиговина, и куда с ней идти я не догадываюсь. Для меня открытием стал тот факт что дробные числа, вида 1.52, 1.33, 0.1 и любые другие имеют после ряда нудей еще цифры отличные от 0. Вот пример.
1.33000000000000007105
0.76000000000000000888
1.52000000000000001776
3.04000000000000003553А вывожу я их так
print(number_format(1.33, 20, '.',' '));
echo "<br>";
print(number_format(0.76, 20, '.',' '));
echo "<br>";
print(number_format(1.52, 20, '.',' '));
echo "<br>";
print(number_format(3.04, 20, '.',' '));
К слову сказать в js получаем такой же результат, с него и началось.
Ведь я указываю простую достаточно дробь, почему при выводе с большей точностью там оказываются другие значения.
Так интересно выглядит другой результат.
0.98999999999999999112
0.10000000000000000555
1.09000000000000007994
print(number_format(0.99, 20, '.',' '));
echo "<br>";
print(number_format(0.1, 20, '.',' '));
echo "<br>";
print(number_format(0.1+0.99, 20, '.',' '));
Сам косяк... Сейчас заведу и вернусь
Сразу прошу не пинать, поиском умею пользоваться, но разобраться в проблеме не хватает навыков.
Есть такой конфиг для домена.
server {
listen 80;
server_name domain.ru www.domain.ru;
rewrite ^(.*) https://www.domain.ru$1 permanent;
server_tokens off;
}
server {
listen 443 ssl;
server_name domain.ru www.domain.ru;
root /var/www/domain.ru/html/;
index index.php;
#pagespeed off;
ssl_certificate /etc/letsencrypt/live/domain.ru/fullchain.pem;
ssl_certificate_key /etc/letsencrypt/live/domain.ru/privkey.pem;
pagespeed Disallow "*/checkout/*";
include /etc/nginx/snippens/ssh.conf;
include /etc/nginx/snippens/cache.conf;
include /etc/nginx/snippens/wordpress.conf;
include /etc/nginx/snippens/all.conf;
include /etc/nginx/snippens/pagespeed-for-hosts.conf;
}
location / {
try_files $uri $uri/ /index.php?$args;
rewrite /wp-admin$ $scheme://$host$uri/ permanent;
rewrite /wp-admin$ $scheme://$host$uri/ permanent;
location ~* ^/wp-content/uploads/.+\.php$ { internal; }
location = /wp-config.php { internal; }
location = /readme.txt { internal; }
location = /install.php { internal; }
location = /wp-includes { internal; }
}
В настройках самого wp перенаправление на https://www.domain установлено.
А с настройками сервера никак не могу разобраться, то 500 то «404 Not Found nginx/1.12.2» Подозреваю что нужно больше секций server, судя по инфо в сети, но как это организовать не пойму, пробовал разные варианты не получилось.
И внезапно, но сервер на Ubuntu.
wget --load-cookies=wget_eltex --keep-session-cookies -U "Mozilla/5.0 (Windows; U; Windows NT 6.0; en-US; rv:1.9.1.5) Gecko/20091102 Firefox/3.5.5" http://192.168.0.1/rebootinfo.cgi?sessisonKey=`ps ef | wget --load-cookies=wget_eltex --keep-session-cookies -U "Mozilla/5.0 (Windows; U; Windows NT 6.0; en-US; rv:1.9.1.5) Gecko/20091102 Firefox/3.5.5" "http://192.168.0.1/resetrouter.html" -q -O - | grep [0-9] | awk -F"=" '{print $3}' | awk -F"'" '{print $1}'`Выше это код до которого я дошел(авторизацию я оставил за сценой).
Но вся суть ступора состоит в том что sessisonKey меняется при каждом новом запросе, что и не дает выполнить перезагрузку через wget потому как при обращении на rebootinfo.cgi?sessisonKey сам sessisonKey уже изменяется.
Вот так выглядит код самой страницы куда шлется последний первый запрос.
<html>
<head>
<meta HTTP-EQUIV='Pragma' CONTENT='no-cache'>
<link rel="stylesheet" href='stylemain.css' type='text/css'>
<link rel="stylesheet" href='colors.css' type='text/css'>
<script language="javascript">
function btnReset() {
location = 'rebootinfo.cgi?sessionKey=1895756659';
}
</script>
</head>
<body>
<blockquote>
Click the button below to reboot the router.
<br><br>
<input type='button' onClick='btnReset()' value='Reboot'>
</blockquote>
</body>
</html>
В идеале запускать просто скрипт при обращении к странице, но как это и можно ли командой я не уверен.
Пробовал терминальные обозреватели но они скрипт(js) не запускаю, и не имеют командной строки чтобы не запускать их «гуй».
В идеале суть задачи, запихать все в bash файл и использовать для перезагрузки роутера без лишних манипуляций.
У кого есть варианты как выполнить запрос с тем же sessisonKey?
П.Н. Telnet есть, но при каждой перезагрузке через telnet настройки на доступ по telnet слетают, восстанавливать их ручками не вариант=бессмысленно, иначе тупо уже не нужен telnet.
Не уходит почта с сервера. В чем проблема никак не могу разобраться. На сервере не предполагается использовать почту как сервис, вся почта на внешних почтовиках, по сему я ее на сервере отключил как услугу, не уверен на 100% в правильности решения но как-то так вот решил проверить. Суть в логах exim
2018-05-03 17:02:35 1fEEoc-0006E1-Vd <= webmaster@thisite.ru U=admin-thisite P=local S=439 from <webmaster@thisite.ru> for mymail@ya.ru
2018-05-03 17:04:42 1fEEoc-0006E1-Vd H=mx.yandex.ru [93.158.134.89] Connection timed out
2018-05-03 17:04:42 1fEEoc-0006E1-Vd == mymail@ya.ru R=dnslookup T=remote_smtp defer (110): Connection timed outNetwork is unreachable
Дальше выкладываю как есть данные, пытаюсь по ходу дела и сам разобраться собирая эти данные.
# cat /etc/resolv.conf
# Generated by NetworkManager
search thisite.ru
nameserver 188.120.ххх.2# cat /etc/hosts
127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4
::1 localhost localhost.localdomain localhost6 localhost6.localdomain6
149.154.ххх.214 thisite.ru
91.240.ххх.138 thisite.ru
149.154.ххх.240 thisite.ru
# cat /etc/sysconfig/network-scripts/ifcfg-eth0
# Generated by parse-kickstart
UUID="95acf6db-23c3-хххх-b4f2-4662a3e211b1"
DNS1="188.120.ххх.2"
IPADDR="149.154.ххх.214"
GATEWAY="149.154.ххх.1"
NETMASK="255.255.254.0"
BOOTPROTO="static"
DEVICE="eth0"
ONBOOT="yes"
IPV6INIT="yes"
IPADDR1=91.240.ххх.138
PREFIX1=32
IPADDR2=149.154.ххх.240
PREFIX2=32
# cat /etc/networks
default 0.0.0.0
loopback 127.0.0.0
link-local 169.254.0.0# netstat -rn
Kernel IP routing table
Destination Gateway Genmask Flags MSS Window irtt Iface
0.0.0.0 149.154.xxx.1 0.0.0.0 UG 0 0 0 eth0
91.240.xxx.138 0.0.0.0 255.255.255.255 UH 0 0 0 eth0
149.154.xxx.0 0.0.0.0 255.255.254.0 U 0 0 0 eth0
149.154.xxx.240 0.0.0.0 255.255.255.255 UH 0 0 0 eth0
# ifconfig
eth0: flags=4163<UP,BROADCAST,RUNNING,MULTICAST> mtu 1500
inet 91.240.xx.138 netmask 255.255.255.255 broadcast 91.240.xx.138
inet6 fe80::50xx:ff:fefe:af86 prefixlen 64 scopeid 0x20<link>
ether 52:xx:00:fe:af:86 txqueuelen 1000 (Ethernet)
RX packets 229032533 bytes 14323105556 (13.3 GiB)
RX errors 0 dropped 0 overruns 0 frame 0
TX packets 10760479 bytes 41828611600 (38.9 GiB)
TX errors 0 dropped 0 overruns 0 carrier 0 collisions 0
lo: flags=73<UP,LOOPBACK,RUNNING> mtu 65536
inet 127.0.0.1 netmask 255.0.0.0
inet6 ::1 prefixlen 128 scopeid 0x10<host>
loop txqueuelen 1 (Local Loopback)
RX packets 598657 bytes 1605680831 (1.4 GiB)
RX errors 0 dropped 0 overruns 0 frame 0
TX packets 598657 bytes 1605680831 (1.4 GiB)
TX errors 0 dropped 0 overruns 0 carrier 0 collisions 0
# exiwhat
32135 daemon(4.88): -q1h, listening for SMTP on port 25 (IPv6 and IPv4) port 587 (IPv6 and IPv4) and for SMTPS on port 465 (IPv6 and IPv4)
Connection timed out
Предполагаю что тут вопрос с «GATEWAY», но это чистая догадка, и что с ней делать даже не представляю.На сервере 3 пользователя и 3 ip, и куча доменов. thisite.ru 149.154.ххх.214 php 7.0.16 (alt)
С запущенным exim выдает
2018-05-03 19:09:44 1fEGng-0008Mo-KH <= webmaster@thisite.ru U=admin-thisite P=local S=439 from <webmaster@thisite.ru> for mymail@ya.ru
2018-05-03 19:09:44 1fEGng-0008Mo-KH == mymail@ya.ru R=dnslookup T=remote_smtp defer (-53): retry time not reached for any host for 'ya.ru'Да. На всякий случай почта должна уходить через скрипт, php, это веб сервер. Скрипт отрабатывает без ошибок а с сервера никуда не идет.
У хостера спрашивал, через чат с фронта, и проверяли ip, говорят что ничего не блокируют.
Стояло Ubuntu и старое ненужно, ненужно заменил на еще одну Ubuntu, обе Ubuntu 12.04.
Первая, старая и большая стоит на расширенном(sda1(sda{5-7})) диске в начале sda, вторая(поставлена вчера) в конце на sda3(между ними еще sda2 на сотку) на ~27Гб.
Так вот при установке вчера старый GRUB потерял контроль и рулит сейчас GRUB поставленный вчера(наверно по невнимательности) вместе с осью.
Вопрос, как вернуть контроль GRUB под старую(основную) ОС?... и желательно чтоб был один GRUB, в смысле чтоб свежая ось, кушала с одной «тарелки» что и старая.
GRUB в обоих случаях ставился в sda.
/dev/sda1 флаг boot
Суть в том что bind серет мне в syslog про ipv6, пытался что-то сделать, ничего не выходит(надо перепроверить), сейчас возник вопрос.
А на кой мне нужен BIND на localhost?
Сижу в сетке через маршрутизатор по вафле, в локалке, не связанной ничем кроме маршрутизатора(прямых соединений нет, кроме как иногда через avahi).
Выход наружу у всех с маршрутизатора, по 1-му внешнему ip.
Так вот, нужен он при моем раскладе или просто «нахлебник»?
Делать открытый сервер во внешку или даже в локалке(192.168**) не собираюсь.
syslog населен этим ->
... kernel: [ 362.708910] init: mysql main process ended, respawning
... kernel: [ 363.209725] init: mysql post-start process (9861) terminated with status 1
... kernel: [ 365.348500] init: mysql main process (9918) terminated with status 7еще встречаются такие...
... /etc/init.d/mysql[9680]: 0 processes alive and '/usr/bin/mysqladmin --defaults-file=/etc/mysql/debian.cnf ping' resulted in
... /etc/init.d/mysql[9680]: /etc/init.d/mysql: строка 75: /usr/bin/mysqladmin: Нет такого файла или каталогаВот тут в... /etc/apparmor.d/usr.sbin.mysqld
# This file is intensionally empty to disable apparmor by default for newer
# versions of MariaDB, while providing seamless upgrade from older versions
# and from mysql, where apparmor is used.
#
# By default, we do not want to have any apparmor profile for the MariaDB
# server. It does not provide much useful functionality/security, and causes
# several problems for users who often are not even aware that apparmor
# exists and runs on their system.
#
# Users can modify and maintain their own profile, and in this case it will
# be used.
#
# When upgrading from previous version, users who modified the profile
# will be promptet to keep or discard it, while for default installs
# we will automatically disable the profile.
/etc/mysql/my.cnf
# MariaDB database server configuration file.
#
# You can copy this file to one of:
# - "/etc/mysql/my.cnf" to set global options,
# - "~/.my.cnf" to set user-specific options.
#
# One can use all long options that the program supports.
# Run program with --help to get a list of available options and with
# --print-defaults to see which it would actually understand and use.
#
# For explanations see
# http://dev.mysql.com/doc/mysql/en/server-system-variables.html
# This will be passed to all mysql clients
# It has been reported that passwords should be enclosed with ticks/quotes
# escpecially if they contain "#" chars...
# Remember to edit /etc/mysql/debian.cnf when changing the socket location.
[client]
port = 3306
socket = /var/run/mysqld/mysqld.sock
# Here is entries for some specific programs
# The following values assume you have at least 32M ram
# This was formally known as [safe_mysqld]. Both versions are currently parsed.
[mysqld_safe]
socket = /var/run/mysqld/mysqld.sock
nice = 0
[mysqld]
#
# * Basic Settings
#
user = mysql
pid-file = /var/run/mysqld/mysqld.pid
socket = /var/run/mysqld/mysqld.sock
port = 3306
basedir = /usr
datadir = /var/lib/mysql
tmpdir = /tmp
lc_messages_dir = /usr/share/mysql
lc_messages = en_US
skip-external-locking
#
# Instead of skip-networking the default is now to listen only on
# localhost which is more compatible and is not less secure.
bind-address = 127.0.0.1
#
# * Fine Tuning
#
max_connections = 100
connect_timeout = 5
wait_timeout = 600
max_allowed_packet = 16M
thread_cache_size = 128
sort_buffer_size = 4M
bulk_insert_buffer_size = 16M
tmp_table_size = 32M
max_heap_table_size = 32M
#
# * MyISAM
#
# This replaces the startup script and checks MyISAM tables if needed
# the first time they are touched. On error, make copy and try a repair.
myisam_recover = BACKUP
key_buffer_size = 128M
#open-files-limit = 2000
table_open_cache = 400
myisam_sort_buffer_size = 512M
concurrent_insert = 2
read_buffer_size = 2M
read_rnd_buffer_size = 1M
#
# * Query Cache Configuration
#
# Cache only tiny result sets, so we can fit more in the query cache.
query_cache_limit = 128K
query_cache_size = 64M
# for more write intensive setups, set to DEMAND or OFF
#query_cache_type = DEMAND
#
# * Logging and Replication
#
# Both location gets rotated by the cronjob.
# Be aware that this log type is a performance killer.
# As of 5.1 you can enable the log at runtime!
#general_log_file = /var/log/mysql/mysql.log
#general_log = 1
#
# Error logging goes to syslog due to /etc/mysql/conf.d/mysqld_safe_syslog.cnf.
#
# we do want to know about network errors and such
log_warnings = 2
#
# Enable the slow query log to see queries with especially long duration
#slow_query_log[={0|1}]
slow_query_log_file = /var/log/mysql/mariadb-slow.log
long_query_time = 10
#log_slow_rate_limit = 1000
log_slow_verbosity = query_plan
#log-queries-not-using-indexes
#log_slow_admin_statements
#
# The following can be used as easy to replay backup logs or for replication.
# note: if you are setting up a replication slave, see README.Debian about
# other settings you may need to change.
#server-id = 1
#report_host = master1
#auto_increment_increment = 2
#auto_increment_offset = 1
log_bin = /var/log/mysql/mariadb-bin
log_bin_index = /var/log/mysql/mariadb-bin.index
# not fab for performance, but safer
#sync_binlog = 1
expire_logs_days = 10
max_binlog_size = 100M
# slaves
#relay_log = /var/log/mysql/relay-bin
#relay_log_index = /var/log/mysql/relay-bin.index
#relay_log_info_file = /var/log/mysql/relay-bin.info
#log_slave_updates
#read_only
#
# If applications support it, this stricter sql_mode prevents some
# mistakes like inserting invalid dates etc.
#sql_mode = NO_ENGINE_SUBSTITUTION,TRADITIONAL
#
# * InnoDB
#
# InnoDB is enabled by default with a 10MB datafile in /var/lib/mysql/.
# Read the manual for more InnoDB related options. There are many!
default_storage_engine = InnoDB
# you can't just change log file size, requires special procedure
#innodb_log_file_size = 50M
innodb_buffer_pool_size = 256M
innodb_log_buffer_size = 8M
innodb_file_per_table = 1
innodb_open_files = 400
innodb_io_capacity = 400
innodb_flush_method = O_DIRECT
#
# * Security Features
#
# Read the manual, too, if you want chroot!
# chroot = /var/lib/mysql/
#
# For generating SSL certificates I recommend the OpenSSL GUI "tinyca".
#
# ssl-ca=/etc/mysql/cacert.pem
# ssl-cert=/etc/mysql/server-cert.pem
# ssl-key=/etc/mysql/server-key.pem
[mysqldump]
quick
quote-names
max_allowed_packet = 16M
[mysql]
#no-auto-rehash # faster start of mysql but no tab completition
[isamchk]
key_buffer = 16M
#
# * IMPORTANT: Additional settings that can override those from this file!
# The files must end with '.cnf', otherwise they'll be ignored.
#
!includedir /etc/mysql/conf.d/
От mysqladmin во всей системе есть только это /etc/bash_completion.d/mysqladmin
# bash completion for mysqladmin
have mysqladmin &&
_mysqladmin()
{
local cur prev split=false
COMPREPLY=()
_get_comp_words_by_ref cur prev
_split_longopt && split=true
case $prev in
-u|--user)
COMPREPLY=( $( compgen -u -- "$cur" ) )
return 0
;;
-h|--host)
_known_hosts_real "$cur"
return 0
;;
--character-sets-dir|--ssl-capath)
_filedir -d
return 0
;;
-S|--socket)
_filedir sock
return 0
;;
--defaults-file|--defaults-extra-file)
_filedir
return 0
;;
-c|--count|--default-character-set|-P|--port|-O|--set-variable|\
-i|--sleep|--ssl-ca|--ssl-cert|--ssl-cipher|--ssl-key|-w|--wait|\
--connect_timeout|--shutdown_timeout)
# Argument required but no completions available
return 0
;;
'-?'|--help|-V|--version)
# All other options are noop with these
return 0
;;
esac
$split && return 0
COMPREPLY=( $( compgen -W '--count --debug-check --debug-info --force \
--compress --character-sets-dir --default-character-set --help --host \
--no-beep --password --port --protocol --relative --set-variable \
--silent --socket --sleep --ssl --ssl-ca --ssl-capath --ssl-cert \
--ssl-cipher --ssl-key --ssl-verify-server-cert --user --verbose \
--version --vertical --wait --connect_timeout --shutdown_timeout \
--print-defaults --no-defaults --defaults-file --defaults-extra-file' \
-- "$cur" ) )
COMPREPLY=( "${COMPREPLY[@]}" \
$( compgen -W 'create debug drop extended-status flush-hosts \
flush-logs flush-status flush-tables flush-threads flush-privileges \
kill password old-password ping processlist reload refresh shutdown \
status start-slave stop-slave variables version' -- "$cur" ) )
} &&
complete -F _mysqladmin mysqladmin
# Local variables:
# mode: shell-script
# sh-basic-offset: 4
# sh-indent-comment: t
# indent-tabs-mode: nil
# End:
# ex: ts=4 sw=4 et filetype=sh
Вывод на некоторые попытки запустить...
:~$ sudo /etc/init.d/mysql restart
* Stopping MariaDB database server mysqld [ OK ]
* Starting MariaDB database server mysqld
[fail]
:~$ /usr/sbin/mysqld
140103 13:48:01 [Warning] Can't create test file /var/lib/mysql/user.lower-test
140103 13:48:01 [Warning] Can't create test file /var/lib/mysql/user.lower-test
/usr/sbin/mysqld: Can't change dir to '/var/lib/mysql/' (Errcode: 13)
140103 13:48:01 [ERROR] Aborting
140103 13:48:01 [Note] /usr/sbin/mysqld: Shutdown complete
:~$ sudo /usr/sbin/mysqld
140103 13:52:23 [Warning] Using unique option prefix myisam_recover instead of myisam-recover-options is deprecated and will be removed in a future release. Please use the full name instead.
140103 13:52:23 [Warning] Using unique option prefix myisam_recover instead of myisam-recover-options is deprecated and will be removed in a future release. Please use the full name instead.
140103 13:52:23 [Note] Plugin 'FEDERATED' is disabled.
140103 13:52:23 InnoDB: The InnoDB memory heap is disabled
140103 13:52:23 InnoDB: Mutexes and rw_locks use GCC atomic builtins
140103 13:52:23 InnoDB: Compressed tables use zlib 1.2.3.4
140103 13:52:23 InnoDB: Initializing buffer pool, size = 256.0M
140103 13:52:23 InnoDB: Completed initialization of buffer pool
140103 13:52:23 InnoDB: highest supported file format is Barracuda.
140103 13:52:24 InnoDB: Waiting for the background threads to start
140103 13:52:25 InnoDB: 5.5.34 started; log sequence number 75131257
140103 13:52:25 [ERROR] /usr/sbin/mysqld: unknown variable 'log_slow_verbosity=query_plan'
140103 13:52:25 [ERROR] Aborting
140103 13:52:25 InnoDB: Starting shutdown...
140103 13:52:25 InnoDB: Shutdown completed; log sequence number 75131257
140103 13:52:25 [Note] /usr/sbin/mysqld: Shutdown complete
~$ mysql start
ERROR 2002 (HY000): Can't connect to local MySQL server through socket '/var/run/mysqld/mysqld.sock' (2)
Надо сказать что есть приблуда «Akonadi» которая запускает мускул для своих нужд, например для KAlarm но в домашней папке /home/user/.local/share/akonadi, но это не то.
Назвать момент когда все поломалось точно не могу.
Вот инфа по установленным пакетам(из Synaptic, по запросу mysql и mariadb)
akonadi-backend-mysql (версия 1.7.2-0ubuntu1)
dbconfig-common (версия 1.8.47)
emma (версия 0.6-4)
libdbd-mysql-perl (версия 4.020-1build2)
libdbi-perl (версия 1.616-1build2)
libmysqlclient18 (версия 5.5.34+maria-1~precise)
libqt4-sql-mysql (версия 4:4.8.1-0ubuntu4.5)
librdf0 (версия 1.0.14-1)
mariadb-common (версия 5.5.34+maria-1~precise)
mysql-client-core-5.5 (версия 5.5.34-0ubuntu0.12.04.1)
mysql-common (версия 5.5.34+maria-1~precise)
mysql-server-core-5.5 (версия 5.5.34-0ubuntu0.12.04.1)
php5-mysql (версия 5.3.10-1ubuntu3.9)
phpmyadmin (версия 4:3.4.10.1-1)
python-mysqldb (версия 1.2.3-1ubuntu0.1)
rsyslog (версия 5.8.6-1ubuntu8.6)
libmariadbclient18 (версия 5.5.34+maria-1~precise)Логи мускула я либо не там искал либо он их перестал писать.