הורדות משרת משתמשות במעבד? - עמוד 2 - הוסטס

אדיר · 03-12-11, 15:17

ציטוט:

נכתב במקור על ידי Youtube4Down.com

אני לא מגיע ל200mbit.. הקבצים שוקלים ממש קצת כך שההורדות מהירות..

אני לא יכול להשתמש בapache גם בגלל ההורדות וגם בגלל כל התהליכים שהוא פותח.
עכשיו אני עם apache ותמיד יש מעל 100 תהליכים פתוחים רק על דפי php, אני מאמין שזה גם מה שעושה את העומס.

אני אעבור לשרת חזק יותר, עם רוחב פס גדול יותר, אתקין עליו nginx ואני מקווה שלא יהיו תקלות..

אתה קופץ למסקנות לא מבוססות וחבל..
ואם עכשיו אני אגיד לך שזה בסדר גמור שיש לך X תהליכים רצים של APACHE בזמן נתון - אפילו אם אין כרגע שום בקשה לשרת, מה אז?

לשדרג שרת, בסדר.. מה בדיוק תשדרג, הכל?
מה אם מה שמגביל אותך זה רוחב הפס? שום שרת חזק יותר לא יעזור לך - מיותר לחלוטין.
מה אם מה שמגביל אותך זה הדיסק הקשיח? תשדרג מעבד וזכרון, זה יראה טוב על הדף, שרת חזק, אבל זה לא יעזור.

אתה לא יכול לתקן בעיה בלי לדעת ממה היא נובעת,
זה לא אחראי לתכנן שדרוג בלי לדעת מה מגביל אותך מלכתחילה.

**yonatan** · 03-12-11, 15:29

ציטוט:

נכתב במקור על ידי דניאל

מה עם seek time?

+1 זה בדיוק צוואר הבקבוק ב I/O.

Tal. · 03-12-11, 15:36

גם את רוחב הפס אני משדרג מ100mbit ל1gbit, אבל אני לא חושב שזאת הבעיה.
עד שפתחתי את האשכול באמת לא ידעתי מה גורם לעומסים, האם זה התוכן הסטטי או הדינאמי.
אבל עכשיו אני די בטוח שזה החלק הדינאמי.
רוחב פס זה לא הבעיה גם בשעות העומס ההורדות יורדות במהירות מקסימלית.
גם זכרון, בדקתי עכשיו אני בקושי ב3gb כל השאר מוקדש לקאש..

אני אחד שכן מקפיד על יעילות וכל הזמן דואג לשפר ולייעל את הקוד.
ככה שזה לא שאני משדרג מבלי לדעת, אני די בטוח שמעבדים יותר חזקים + nginx יפתור את הבעיות.

בקשר למה שאמרת שמסד גדול יכול לגרום לבעיות, האמת שלא הייתי מודע לזה ובאמת יש לי מסד שמן מאד.
אני אבדוק את זה אבל קשה לי להאמין שזה הבעיה כי הייתי שם לב.

אדיר · 03-12-11, 16:28

ציטוט:

נכתב במקור על ידי Youtube4Down.com

גם את רוחב הפס אני משדרג מ100mbit ל1gbit, אבל אני לא חושב שזאת הבעיה.
עד שפתחתי את האשכול באמת לא ידעתי מה גורם לעומסים, האם זה התוכן הסטטי או הדינאמי.
אבל עכשיו אני די בטוח שזה החלק הדינאמי.
רוחב פס זה לא הבעיה גם בשעות העומס ההורדות יורדות במהירות מקסימלית.
גם זכרון, בדקתי עכשיו אני בקושי ב3gb כל השאר מוקדש לקאש..

אני אחד שכן מקפיד על יעילות וכל הזמן דואג לשפר ולייעל את הקוד.
ככה שזה לא שאני משדרג מבלי לדעת, אני די בטוח שמעבדים יותר חזקים + nginx יפתור את הבעיות.

בקשר למה שאמרת שמסד גדול יכול לגרום לבעיות, האמת שלא הייתי מודע לזה ובאמת יש לי מסד שמן מאד.
אני אבדוק את זה אבל קשה לי להאמין שזה הבעיה כי הייתי שם לב.

תבדוק את זה, אל תשדרג סתם..

ציטוט:

נכתב במקור על ידי xPerfection

אתה קופץ למסקנות לא מבוססות וחבל..
[...]
אתה לא יכול לתקן בעיה בלי לדעת ממה היא נובעת,
זה לא אחראי לתכנן שדרוג בלי לדעת מה מגביל אותך מלכתחילה.

ציינתי בהודעה הראשונה שלי דרך הפעולה סבירה של המערכת שלך (כמשתמש מבקש להוריד קובץ אז המערכת מורידה אותו מיוטוב + מקודדת אותו בזמן אמת ואז מגישה אותו למשתמש?),
אם זה באמת המצב, אולי זה מה שבעצם מעמיס לך על השרת, או אולי זה בעצם המסד, או אולי, או אולי..

יש המון דברים, יש המון השערות שאפשר לזרוק באוויר, כל עוד לא ביצענו בדיקה למערכת - זה חסר טעם.

Kernel · 03-12-11, 23:56

יש לך קבצים מאוד מאוד מבוקשים?
אתה משתמש בphp כדי להוריד קבצים(לא ליצור אותם)?

Tal. · 04-12-11, 00:36

כן, קבצים מבוקשים.
וכן עד עכשיו השתמשתי בPHP כדי להוריד קבצים, אבל בNGINX אני אשתמש בX-Accel-Redirect.

Kernel · 04-12-11, 00:57

את עשרת הקבצים המאוד מבוקשים (יותר מ100 הורדות ביום לקובץ - לדוגמא), אפשר להעביר לזכרון המטמון וכבר ״חסכת״ 1000 קריאות מהhd.

דבר נוסף ולדעתי העיקרי שמעמיס לך על המערכת. היא ההורדה באמצעות php.
אתה ״ממציא את הגלגל מחדש וזה לא נעשה בצורה מיטבית בד״כ, לדוגמא, אם מוסיפים traffic shaping חלק מהמתכנתים כותבים קוד שקורא כל פעם קטע מסויים ושולח אותו ואז קורא שוב קטע וכך הלאה. זה לא יעיל ולא חכם (לעומת לטעון כל פעם Xkb ולשלוח X/50 - תלוי במשאבי השרת), אתה מבזבז המון משאבי מעבד על php ופה נגרם רוב העומס.

היום אפשר למנוע גניבת תעבורה ולהפעיל חוקים של traffic shaping, על nginx ודומיו, כלומר. במקום 100 פרוססים של apache, רק הפרוססים של התוכן הדינאמי מטופלים ע״י apache והיתר ע״י nginx.

גם שימוש בaccel-redirect הוא לא חכם כי אתה משתמש בקוד php מאשר ליצור כתובת url עם ttl.

Tal. · 04-12-11, 01:28

למה accel redirect לא חכם? :S
גם לו יש TTL והגבלת IP והכל..

לא מבין מה ההבדל.. הרבה יותר נוח לי עם redirect מאובטח

Kernel · 04-12-11, 01:41

Redirect:

אתה יוצר קישור בדף לסקריפט
הסקריפט מנתח את הבקשה (!!!)
במידה וחיובי. מעביר אותך לעמוד.

Secure link:
אתה יוצר קישור בדף לקובץ בsecure link.
המשתמש מוריד ישירות מnginx.

בשימוש בsecure link אתה חוסך שלב, סקריפט php. מקצר ttfb וזמן מעבד.

Tal. · 04-12-11, 03:32

גם בsecure link מתבצע בדיקה של הזמן והאייפי בדיוק כמו בphp
והקובץ יורד ישירות מnginx גם בredirect

03-12-11, 23:56	# 15
Kernel אושיית הוסטינג דירוג מסחר: (0) מיני פרופיל תאריך הצטרפות: Oct 2005 מיקום: בקעת אונו הודעות: 2,429	יש לך קבצים מאוד מאוד מבוקשים? אתה משתמש בphp כדי להוריד קבצים(לא ליצור אותם)? __________________ אבי

04-12-11, 00:57	# 17
Kernel אושיית הוסטינג דירוג מסחר: (0) מיני פרופיל תאריך הצטרפות: Oct 2005 מיקום: בקעת אונו הודעות: 2,429	את עשרת הקבצים המאוד מבוקשים (יותר מ100 הורדות ביום לקובץ - לדוגמא), אפשר להעביר לזכרון המטמון וכבר ״חסכת״ 1000 קריאות מהhd. דבר נוסף ולדעתי העיקרי שמעמיס לך על המערכת. היא ההורדה באמצעות php. אתה ״ממציא את הגלגל מחדש וזה לא נעשה בצורה מיטבית בד״כ, לדוגמא, אם מוסיפים traffic shaping חלק מהמתכנתים כותבים קוד שקורא כל פעם קטע מסויים ושולח אותו ואז קורא שוב קטע וכך הלאה. זה לא יעיל ולא חכם (לעומת לטעון כל פעם Xkb ולשלוח X/50 - תלוי במשאבי השרת), אתה מבזבז המון משאבי מעבד על php ופה נגרם רוב העומס. היום אפשר למנוע גניבת תעבורה ולהפעיל חוקים של traffic shaping, על nginx ודומיו, כלומר. במקום 100 פרוססים של apache, רק הפרוססים של התוכן הדינאמי מטופלים ע״י apache והיתר ע״י nginx. גם שימוש בaccel-redirect הוא לא חכם כי אתה משתמש בקוד php מאשר ליצור כתובת url עם ttl. __________________ אבי

04-12-11, 01:41	# 19
Kernel אושיית הוסטינג דירוג מסחר: (0) מיני פרופיל תאריך הצטרפות: Oct 2005 מיקום: בקעת אונו הודעות: 2,429	Redirect: אתה יוצר קישור בדף לסקריפט הסקריפט מנתח את הבקשה (!!!) במידה וחיובי. מעביר אותך לעמוד. Secure link: אתה יוצר קישור בדף לקובץ בsecure link. המשתמש מוריד ישירות מnginx. בשימוש בsecure link אתה חוסך שלב, סקריפט php. מקצר ttfb וזמן מעבד. __________________ אבי


	ההרשמה לפורום נפתחה - אפשרות רישום לכל אימייל (דומיינים פרטיים, gmail, הוטמייל..)!

03-12-11, 15:36	# 13
Tal. חבר מתקדם דירוג מסחר: (0) מיני פרופיל תאריך הצטרפות: Dec 2010 הודעות: 463	גם את רוחב הפס אני משדרג מ100mbit ל1gbit, אבל אני לא חושב שזאת הבעיה. עד שפתחתי את האשכול באמת לא ידעתי מה גורם לעומסים, האם זה התוכן הסטטי או הדינאמי. אבל עכשיו אני די בטוח שזה החלק הדינאמי. רוחב פס זה לא הבעיה גם בשעות העומס ההורדות יורדות במהירות מקסימלית. גם זכרון, בדקתי עכשיו אני בקושי ב3gb כל השאר מוקדש לקאש.. אני אחד שכן מקפיד על יעילות וכל הזמן דואג לשפר ולייעל את הקוד. ככה שזה לא שאני משדרג מבלי לדעת, אני די בטוח שמעבדים יותר חזקים + nginx יפתור את הבעיות. בקשר למה שאמרת שמסד גדול יכול לגרום לבעיות, האמת שלא הייתי מודע לזה ובאמת יש לי מסד שמן מאד. אני אבדוק את זה אבל קשה לי להאמין שזה הבעיה כי הייתי שם לב.

04-12-11, 00:36	# 16
Tal. חבר מתקדם דירוג מסחר: (0) מיני פרופיל תאריך הצטרפות: Dec 2010 הודעות: 463	כן, קבצים מבוקשים. וכן עד עכשיו השתמשתי בPHP כדי להוריד קבצים, אבל בNGINX אני אשתמש בX-Accel-Redirect.

04-12-11, 01:28	# 18
Tal. חבר מתקדם דירוג מסחר: (0) מיני פרופיל תאריך הצטרפות: Dec 2010 הודעות: 463	למה accel redirect לא חכם? :S גם לו יש TTL והגבלת IP והכל.. לא מבין מה ההבדל.. הרבה יותר נוח לי עם redirect מאובטח

04-12-11, 03:32	# 20
Tal. חבר מתקדם דירוג מסחר: (0) מיני פרופיל תאריך הצטרפות: Dec 2010 הודעות: 463	גם בsecure link מתבצע בדיקה של הזמן והאייפי בדיוק כמו בphp והקובץ יורד ישירות מnginx גם בredirect

חברים פעילים הצופים באשכול זה: 1 (0 חברים ו- 1 אורחים)