torkik 4 августа 2007, 09:37 3077

Магдональс

Классная штука на самом деле, быстро, чисто, вежливо, безопасно и съедобно... МагДрайв, пару световоров и ты пообедал... незаменимо, в дни усиленной беготни...Последнеие 7-8 лет питаюсь по магдонасльсам гдето раз в неделю, ни разу ни траванулся, ни разу не обманули... Здоров. вес, холестерин в норме...Попадаешь в чужую страну, если не знаком с кухней, обычаями, ценами, и хочется поесть без приключений, вперед в в МагДональс...Кароче Магдональс рулит!!!

adrenalin28 Апреля 2009, 06:59

din experienta care o am, ceea ce nu trebuie de facut cind ai multe fisiere prin nfs asta asta ls. avind multe fisiere adresindu-ma direct dupa nume la un fisier nu este nici o problema. presupun cind faci cp * are loc ls si atunci se indoaie.
incearca sa faci in felul urmator, pe hostu unde se afla fisierele faci ls > intrunfisier.txt astfel vei avea toate numele de fisiere, apoi pe celalat server faci un mic script bash care citeste fiecare linie si faci cp (google bash read lines) cu numele exact.
2000 asta nu-i de loc mult
cred ca mai repede va fi de utilizat rsync

>scopul e sa pot incarca fishiere prin webserver shi sa le copii pe storage server...
singur utilizez, principalu sa eviti ls-urile

-=tmt=-28 Апреля 2009, 08:50

hehe :) daca o sa evitzi citirea si scrierea fisierelor.. in genere o sa zboare =))))

octiх29 Апреля 2009, 04:02

adrenalin...din experienta care o am, ceea ce nu trebuie de facut...
da, am incercat 1 director cu vreo 1000 de fishiere sa copii.. in total vreo 5GB

in general, copii cate 3-4 fishiere prin nfs.. fishierul se incarca, se prelucreaza shi apar cateva fishiere.. pe care le mut prin nfs..

insa deam depinde de catzi utlizatori fac acest lucru.

interesant prin rsync daca va fi acelashi efect...

-=tmt=-...hehe :) daca o sa evitzi citirea si scrierea fisierelor.....
:))

adrenalin29 Апреля 2009, 21:49

octiх...3-4 fishiere prin nfs...
3-4 in paralel sau secvential ?

Daca concurent, nu sunt sigur dar posibil sa fie probleme

Din cite ma uit, atit pe server cit si la client scrie asa ceva.

" For example, ``nfsd -u -t -n 6'' serves UDP and TCP transports using six
daemons.

A server should run enough daemons to handle the maximum level of concur-
rency from its clients, typically four to six.
"
http://www.freebsd.org/cgi/man.cgi?query=nfsd&sektion=8

" -n Specify how many servers are permitted to be started.

A client should run enough daemons to handle its maximum level of concur-
rency, typically four to six.
"

http://www.freebsd.org/cgi/man.cgi?query=nfsiod&sektion=8

Defapt cred ca nu-i asta.

Serverele se afla intr-o retea ? By default este utilizat udp care nu face control de transmisie.

este si o comanda nfsstat

octiх29 Апреля 2009, 21:53

adrenalin...nfsstat...
n-am shtiut

adrenalin...Serverele se afla intr-o retea...
nu, insa traficul e MD.. deshi o sa le punem sa fie intr-o reztea..

adrenalin...nfsd -u -t -n 6...
da care default? nu shtii ? pana acum era fara parametri.. am pus -n 4 acum.. nushtu daca o sa ajute...

da daca de folosit ftp banal?

adrenalin29 Апреля 2009, 23:56

octiх...traficul e MD...
in primul rind pune sa mearga prin tcp si vezi daca mai este problema.

octiх30 Апреля 2009, 00:46

adrenalin...prin tcp...
rpcinfo -p

program vers proto port service
100000 4 tcp 111 rpcbind
100000 3 tcp 111 rpcbind
100000 2 tcp 111 rpcbind
100000 4 udp 111 rpcbind
100000 3 udp 111 rpcbind
100000 2 udp 111 rpcbind
100000 4 local 111 rpcbind
100000 3 local 111 rpcbind
100000 2 local 111 rpcbind
100003 2 udp 2049 nfs
100003 3 udp 2049 nfs
100003 2 tcp 2049 nfs
100003 3 tcp 2049 nfs
100005 1 udp 647 mountd
100005 3 udp 647 mountd
100005 1 tcp 665 mountd
100005 3 tcp 665 mountd

parca lucreaza cum ambele... deshi asta arata dupa ce am adaugat
nfs_server_flags="-u -t -n 4" in rc.conf nu tzin minte cum era inainte de asta.. ca in genere azi o gliucit nfs-u...

adrenalin30 Апреля 2009, 01:04

octiх...Adrenalin: "... prin tcp ..." - rpcinfo -p program...
macar arata ce loguri ai

octiх30 Апреля 2009, 01:24

adrenalin...macar arata ce loguri ai...
ultima data cand a cazut, in loguri nu erau erori nimic... oricum ne gandim sa schimbam infrastructura.. dupa asta mai vedem...

multzumesc!

localhost1130 Апреля 2009, 03:41

Monteaza -a -u si tot o sa fie batz.

btw ce filesystem iuzezi ?

octiх30 Апреля 2009, 20:27

localhost11...btw ce filesystem iuzezi...
ufs

in general problema e mai grava.

pe serverul nfs sta raid 0+1, shi cand copii de pe server sau pe server... se restarteaza.. se pare operatziunile.. cred ca raidul nu rezista.. ca e software
freebsd 6.2...

in general ma intreb daca totodata e problema cu compatibilitatea, intrucat nfs client are FreebSD 7.1 iar nfs server-u e cu 6.2

Oricum vom schimba hdd-urile, ca fsck-ul se pare ca a stricat nishte fishiere...

octiх08 Мая 2009, 23:23

Deci a fost reinstalat OS-ul. S-a pus FreeBSD 7.1.
Am unit compurile direct prin cablu de retzea. Viteza a crescut desigur,
insa oricum cand se fac muulte operatziuni de citire/scriere se ineaca.. dispare
conexiunea intre ele... se pare ca e problema la nfs.

Operatziunile care le facem sunt:
Sunt vreo 8000 de fishiere. Fiecare este citit, shi din el se creaza unul mai mic, care se inscrie inpoi
prin nfs...

Shi se ineaca cam cand ajunge la urma... pe serverul nfs nu e nimic in loguri. Numai in partea
la client, scrie "not responding" shi pe urma "is alive again"...

Hm... ma gandesc, da poate e legat de vreo limita de OS? de ex nr de fishiere deschise sau eu shtiu...
ideie nu am unde sa ma uit.. deshi iaca un prieten imi zica ca avea sa arunge mesaje de eroare in
log...

PS: ultima data cand am incercat, a ajutat sa pun un delay intre operatziuni, de parca ishi lua aer :)

localhost1109 Мая 2009, 01:17

octiх...Deci a fost reinstalat OS-ul. S-a pus FreeBSD 7.1....
Dar cum este atunci cind ele se ineaca ? Adica cum este legatura.

PC -> SW -> Internet
Poate fi limita pusa de Operator. Adica pachete pe secunda sau alte limite.
Btw : NFS e prin TCP sau UDP ?

octiх09 Мая 2009, 02:24

localhost11...PC -> SW -> Internet <- SW <- PC...
a fost asha initzial... inainte sa fie reinstalat totul... acum e direct, cablu UTP, LAN.. fara switch...

localhost11...NFS e prin TCP sau UDP...
parca prin ambele..

rpcinfo -p
program vers proto port service
100000 4 tcp 111 rpcbind
100000 3 tcp 111 rpcbind
100000 2 tcp 111 rpcbind
100000 4 udp 111 rpcbind
100000 3 udp 111 rpcbind
100000 2 udp 111 rpcbind
100000 4 local 111 rpcbind
100000 3 local 111 rpcbind
100000 2 local 111 rpcbind
100005 1 udp 611 mountd
100005 3 udp 611 mountd
100005 1 tcp 611 mountd
100005 3 tcp 611 mountd
100003 2 udp 2049 nfs
100003 3 udp 2049 nfs
100003 2 tcp 2049 nfs
100003 3 tcp 2049 nfs

Este vreun mod de a face debug?

Apropo:

nfsstat -s

Server Info:
Getattr Setattr Lookup Readlink Read Write Create Remove
961 5616 16839 0 277718 4942728 3798 3
Rename Link Symlink Mkdir Rmdir Readdir RdirPlus Access
0 0 0 8 3 37 0 8225
Mknod Fsstat Fsinfo PathConf Commit
0 1075 6 0 37818
Server Ret-Failed
6782
Server Faults
0
Server Cache Stats:
Inprog Idem Non-idem Misses
3 0 7 5294843
Server Write Gathering:
WriteOps WriteRPC Opsaved
4942728 4942728 0

shi

pe compu client..

nfsstat -c
Client Info:
Rpc Counts:
Getattr Setattr Lookup Readlink Read Write Create Remove
961 0 4194 0 277716 16456 862 2
Rename Link Symlink Mkdir Rmdir Readdir RdirPlus Access
0 0 0 6 2 22 0 3361
Mknod Fsstat Fsinfo PathConf Commit
0 1051 4 0 882
Rpc Info:
TimedOut Invalid X Replies Retries Requests
0 0 0 4942 305521
Cache Info:
Attr Hits Misses Lkup Hits Misses BioR Hits Misses BioW Hits Misses
96050 3250 13476 4194 44056 277712 63973 16456
BioRLHits Misses BioD Hits Misses DirE Hits Misses
0 0 33 22 20 0

nu ma pricep in aestea :)

localhost1109 Мая 2009, 02:59

octiх...localhost: "... PC -> SW -> Internet <- SW...
Ti-ai pus proc ?

Arata cum montezi. Daca e in fstab, pune aici.

octiх...nfsstat -s...
nfsstat -rc

octiх09 Мая 2009, 03:32

localhost11...Ti-ai pus proc...
nu

localhost11...Arata cum montezi...
mount_nfs 192.168.1.1:/shared /usr/local/www/domeniu.md/shared

nfsstat: illegal option -- r
usage: nfsstat [-cszW] [-M core] [-N system] [-w interval]

:) e freebsd

in general pot evita operatziunile date, insa ma gandesc cat de stabil va lucra in genere... in sens ca la moment nu se simte.. insa cu timpul tot mai multzi useri vor incarca fishiere shi respectiv, sa nu ajung la aceeashi situatzie...

eu caut cauza! e limitare de la nfs sau eu shtiu.. poate fi ceva banal.. de ex de configurat....

in general se pare ca se foloseshte NFSv3 pt ca NFSv4 e numai in FreeBSD 8... asha ca poate fi shi asta cauza.. cine shtie...

localhost1109 Мая 2009, 03:48

monteaza cu intr,rsize=8192,wsize=8192,noatime

-=tmt=-09 Мая 2009, 04:02

potzi adauga si optinuea ignorebsdbugs=true

:D

localhost1109 Мая 2009, 04:14

-=tmt=-...potzi adauga si optinuea ignorebsdbugs=true :D...
)

octiх09 Мая 2009, 08:38

-=tmt=-...potzi adauga si optinuea ignorebsdbugs=true :D...
da ceva mai constructiv? in linux am intzeles in genere nfs-u ii de-a sula implementat :)

localhost11...intr,rsize=8192,wsize=8192,noatime...
asta in fstab? ash vrea sa evit fstabul.. in caz ca serverul indicat va fi down, sa nu sa se opreasca.

...sa nu sa se opreasca...
cand fac restart de ex...

localhost1109 Мая 2009, 12:32

octiх...in linux am intzeles in genere nfs-u ii de-a sula implementat :)...
rau ai inteles.

octiх...asta in fstab...
nu numaidecit.

adrenalin09 Мая 2009, 19:21

octiх...da ceva mai constructiv? in linux am intzeles in genere...
in locu tau de mult ma adresam la spatiile mai largi http://lists.freebsd.org/mailman/listinfo

octiх...Sunt vreo 8000 de fishiere. Fiecare este citit...
8000 concomitent ? Sau secvential ?

Ai incercat sa te uiti cit trafic circula intre hosturi ? systat -ifstat
Fa fstat si vezi cite fisiere are deschise nfs-ul
Fa gstat si uite la activitatea hdd-urilor
Fa netstat -m si uite la mbufs valoare currenta si altele cu *denied
Incearca sa faci un test-case care reproduce problema, atunci vei primi ajutor garantat din mail-listuri.

octiх09 Мая 2009, 19:38

adrenalin...gstat...
oo, n-am shtiut de dansa...

ok, mersi o sa mai incerc.

localhost1109 Мая 2009, 21:53

octiх..."tu vei sta in KPZ pe programare si pe orice alta tema care mi-i interesanta" (c) dv...
Da, el e concinii om.

Comunist ebanii.

adrenalin09 Мая 2009, 23:26

localhost11...octiх: "... "tu vei sta in KPZ pe programare si pe...
asta a fost extrem de relevant la tema.

Suntem si noi o mina de moldoveni si acei reusesc sa se sfadeasca, felicitari ;o)

madalex10 Мая 2009, 04:41

HZ cum ii pe FreeBSD, la mine sta nfs link intre un Buffalo Terastattion II cu raid 5 si un debian client care monteaza prin autofs, panacand probleme nam intalnit. ambele parti si linux ;)

localhost1110 Мая 2009, 05:25

madalex...HZ cum ii pe FreeBSD, la mine sta nfs link intre un...
MadAlex: "... sunt multe fishiere shi mici shi mari.. ~2000 ..." la tine tot asa ?:)

madalex10 Мая 2009, 18:11

localhost11...MadAlex: "... sunt multe fishiere shi mici shi mari.....
is peste 100gb de fotografii si video, le mut incolo-incoace fara de probleme

octiх10 Мая 2009, 22:23

madalex...27 is peste 100gb de fotografii si video, le mut incolo-incoace...
ap shi in cazul meu, se copie fara probleme in general, insa sunt cazuri specifice cand nu rezista... incerc cate oleaca sa reproduc...

potzi sa aratzi parametrii cu care montezi? sau in mod obishnuit?

localhost1110 Мая 2009, 23:32

madalex...Buffalo Terastattion II cu raid 5...
:)

La el e DEVICE :)

http://www.buffalotech.com/products/network-storage/terastation/terastation-pro-ii/

SNAIL10 Мая 2009, 23:35

ДЕЛАЕМ СТАВКИ

madalex11 Мая 2009, 21:47

octiх...ap shi in cazul meu, se copie fara probleme in general,...
la mine se monteaza prin autofs, in auto.misc am ceva de tipul

mount_point -rw,soft,intr,rsize=8192,wsize=8192 nfs_server_ip_address:/nfs_export

localhost11...MadAlex: "... Buffalo Terastattion II cu raid 5 ..."...
nu conteaza, is aceleasi packete pentru nfs

localhost1112 Мая 2009, 01:11

madalex...29 la mine se monteaza prin autofs, in auto.misc am...
Eu fix asta i-am spus.

octiх12 Мая 2009, 07:54

madalex...29 la mine se monteaza prin autofs, in auto.misc am...

localhost11...Eu fix asta i-am spus....
senkiu

am montat in felul urmator:

mount_nfs -i -s -r 8192 -w 8192 192.168.1.1:/share /usr/local/www/domen/share

ceea ce inseamna intr, soft shi deam restu..

acush incerc sa testez cu iozone...

darkmag12 Мая 2009, 14:26

1) maillisturi (mai intii sa te uiti cum correct se pun intrebarile, si daca vei reusi - deobicei timp de kiteva ore vei gasi raspuns)
2) tcpdump si sursele in dinti :) kind ai un stable reproducer e foarte ushor de gasit buguri.

apropos, da freebsd are ceva gen bugzilla oficiala? sau tot asha au ramas?

adrenalin12 Мая 2009, 22:27

darkmag...bugzilla oficiala...
evidentos http://www.freebsd.org/support/bugreports.html ;)
cind le-am scris ultima data au fost destul de operativi cu raspunsul

localhost1112 Мая 2009, 22:57

adrenalin...DarkMag: "... bugzilla oficiala ..." - evidentos http://www.freebsd.org/support/bugreports.html...
Da, numai ca in cazul dat eu cred ca este mai mult un misconfiguration decit un bug :)

octiх12 Мая 2009, 23:09

localhost11...misconfiguration...
out of the box asha lucreaza :) + la asta in handbook nica nu scrie.. deshi acolo este la troublesooting ceva.. insa nimic ref la parametrii soft, intr

ce-i drept poate trebuie de facut tuning la server.

in orice caz, am mai facut nishte teste, parca lucreaza.. o sa incerc sa fac crashtest cumva... insa itnrucat lucrez remote.. nu e chiar asha de simplu :)

tre sa rog pe cineva sa se duca sa vada de ce nu s-a ridicat de ex...

localhost1112 Мая 2009, 23:49

octiх...insa nimic ref la parametrii soft, intr...
Esti lenos.

http://www.google.com/search?hl=ro&client=opera&rls=en&hs=j3G&q=soft%2Cintr+mount+option+in+NFS&btnG=C%C4%83utare&lr=

Al doilea link :
http://www.redhat.com/docs/manuals/enterprise/RHEL-5-manual/Deployment_Guide-en-US/s1-nfs-client-config-options.html

hard or soft — Specifies whether the program using a file via an NFS connection should stop and wait (hard) for the server to come back online, if the host serving the exported file system is unavailable, or if it should report an error (soft).

If hard is specified, the user cannot terminate the process waiting for the NFS communication to resume unless the intr option is also specified.

If soft is specified, the user can set an additional timeo= option, where specifies the number of seconds to pass before the error is reported.

intr — Allows NFS requests to be interrupted if the server goes down or cannot be reached.

Si in general RTFM :)

octiх13 Мая 2009, 01:34

localhost11...octiх: "... insa nimic ref la parametrii soft, intr...
:) eu am avut in vedere in handbook, aici: http://www.freebsd.org/doc/en/books/handbook/network-nfs.html pashii de setare shi configurare a NFS-ului nu includ tuning-ul...

insa in general am cautat shi am gasit, doar trebuia sa shtiu ce parametri sa folosesc, nu?

ps: 10x oricum

octiх23 Мая 2009, 19:39

mai in scurt am refuzat la NFS shi folosesc FTP in schimb. viteza de transfer e aproape dubla! asha ca in cazul meu e super. php face treaba buna cu FTP-ul asha ca nu am ce sa ma plang :)

nu m-am clarificat pana la capat, insa banuiesc ca vreun script php care des apela functzii functzii de genu file_exists, filesize() cumva influentzau...

multzumesc tuturor care au incercat sa ma ajute.