הוסטס - פורום אחסון האתרים הגדול בישראל

הוסטס - פורום אחסון האתרים הגדול בישראל (https://hosts.co.il/forums/index.php)
-   בקשות אחסון (הכל כלול) (https://hosts.co.il/forums/forumdisplay.php?f=11)
-   -   אחסון לאתר סרטונים (https://hosts.co.il/forums/showthread.php?t=87609)

cateye 25-01-11 00:12
אחסון לאתר סרטונים
 
שלום רב לכולם.

אני מתכנן להעלות אתר הכולל ברובו המוחלט סירטונים (דומה ליוטיוב לצורך השוואה)
אי לכך אני אצטרך:

1. שרת תומך בוידאו
2. איחסון גדול (למען האמת אני לא מאמין שבהתחלה אני אצטרך הרבה, אבל שלפחות תהיה את האפשרות)
3. תעבורה בלתי מוגבלת (אין סיבה להגביל תעבורה היום)
4. ממשק ניהול נוח
5. שרת הממוקם בישראל כדי לאפשר למשתמשים מהירות מקסימאלית! - חובה!
6. uptime של 99.9% כולל גיבוי (אם בתשלום נוסף נא לציין)
7. מכיוון שהשרת יהיה של סירטונים ייתכן ויהיה צורך במעט יותר משאבים מאשר שרת רגיל. (יש לקחת את זה בחשבון)
8. עדיפות למישהו שמבין/בעל ניסיון בנושא של אתר סירטונים.

אשמח לכל הצעה מתאימה, תודה רבה על שיתוף הפעולה.

yonatan 25-01-11 00:32
אני מציע לך לחפש הצעות ל VPS שיענו לצרכים שלך.

Kernel 25-01-11 00:38
VPS בארץ לא ישתלם לו, בגלל המחיר של רוחב הפס.
בתחילת הדרך אתה צריך איחסון שיתופי(אם תמצא בארץ איחסון שתומך ב-FFMPEG).
כל עוד אתה על שרת שיתופי לא תוכל לאפשר קפיצה מנקודה לנקודה בסרטים שלך(ואם תשתמש בסקריפט PHP שמאפשר את זה, מהר מאוד יסגרו לך את החשבון כי אתה סוחט את כל השרת).

ברגע שאתה גדל, עבור לשרת ייעודי, תתקין LIGHTTPD/NGINX עם תמיכה ב-FLV STREAMING (ואם מדובר גם בסרטי HD, אז גם ב-H264). ואז תוכל לאפשר לגולשים שלך לצפות בסרטונים עם קפיצה מנקודה לנקודה(כמו ביוטוב).

Mbps.co.il 25-01-11 01:10
אם אתה מחפש VPS אני אשלח לך הצעה אבל ממש לא מובן מה אתה מחפש ומה סדר גודל התקציב שלך..
VPS עם פס רחב בארץ לא יעלה לך כמו אכסון אתר רגיל .. אפילו לא קרוב

cateye 25-01-11 11:24
תודה על העזרה יונתן.

קרנל (אחלה ניק), אחסון שיתופי יתן לי המון מקום איחסון אבל תהיה לי בעיה מבחינת משאבים.
אתה חושב שלאתר מסוג זה יספיק? (שים לב שהסרטונים ככל הנראה יומרו לFLV וMP4 כדי לחסוך מקום)

Mbps, דווקא חשבתי שכן פירטתי בצורה מובנת.
אני רוצה לשמוע מה כל אחד יכול לתת לי כדי לאפשר איחסון הולם לאתר, לאחר מכן נדבר על מחיר.

האם VPS הוא האופציה היחידה?

Mbps.co.il 25-01-11 13:55
אז ככה אם אתה רוצה VPS ישנן שתי אפשרויות
קודם כל לבחור
בארץ ?
בחו"ל?
זה תלוי בעיקר בקהל היעד שלך . אם בינלאומי -> חו"ל בלי למצמץ
אם רובו ישראלי אתה יכול חו"ל אבל קח בחשבון שישנה בעיה אצל הרבה משתמשים של קו בוא נאמר "רעוע" לחו"ל . מהבחינה הזו גם אם יהיה לך קו של 1gbit
ורק משתמש אחד יצפה.. הוא עלול לקבל חוויית צפייה בוא נגיד לא מאוד איכותית עד עצלה מאוד , שוב מאוד מאוד אינדיבידואלי אצלי למשל יש הורדה מעולה מחו"ל אבל אצל הרבה מכרים שלי ההורדה שמתקבלת היא בסביבות 30~100 ק"ב לשניה .

אם אתה הולך על הארץ אז שוב יש שתי אפשרויות:
להתחיל בקטן ?
להתחיל בגדול ?

אם תרצה להתחיל בקטן , תצטרך לחפש VPS מחברה שנותנת שירות VPS עם קווים בנפח גבוהה פרטי (לדעתי להתחלה יכול להספיק לך אפילו 10~25 מביט אבל כדאי לשמור אופציה להגדלה בעתיד)
אם תרצה להתחיל בגדול , משמע לבנות מערך שרתים יעודיים עם נפחי קו גבוהים , וכמובן שלאתר כזה הייתי ממליץ גם על STORAGE יעודי (מעין מערך הארד דיסקים ברייד שמספק ביצועים טובים משמעותית ואמינות)

בכל מקרה לפני שתבקש הצעות מומלץ שתגיע להחלטות קריטיות כמו - כמה אני משקיע על השרת בתקופה ההתחלתית ? האם אני רוצה להתחיל בגדול או בקטן ? ארץ או חו"ל ?

כשתדע מומלץ שתפתח אשכול חדש...

Kernel 25-01-11 17:39
ציטוט:
נכתב במקור על ידי cateye (פרסם 793884)
תודה על העזרה יונתן.

קרנל (אחלה ניק), אחסון שיתופי יתן לי המון מקום איחסון אבל תהיה לי בעיה מבחינת משאבים.
אתה חושב שלאתר מסוג זה יספיק? (שים לב שהסרטונים ככל הנראה יומרו לFLV וMP4 כדי לחסוך מקום)

Mbps, דווקא חשבתי שכן פירטתי בצורה מובנת.
אני רוצה לשמוע מה כל אחד יכול לתת לי כדי לאפשר איחסון הולם לאתר, לאחר מכן נדבר על מחיר.

האם VPS הוא האופציה היחידה?
כמה משתמשים אתה צופה לאתר?
האם האתר מיועד לשוק הישראלי?

בכל מקרה, הרוב מתחילים על שרת שיתופי/EMBED, ולאחר מכן עוברים לשרת פרטי - בעיקר בגלל בעיות תקציב/חוסר כדאיות.
במידה והשרת מיועד לישראל -> אתה חייב שרת בארץ,
במידה ותיקח VPS, יקרעו אותך במחיר.

הפתרון הכי משתלם, הוא לעבוד ישר מול החווה.

cateye 26-01-11 19:22
האתר מיודע לשוק הישראלי וציינתי בדרישות שאני צריך שרת בארץ (מספר 5)
אני מאמין שבהתחלה לא יהיו הרבה משתמשים כמו כל אתר בתחילת דרכו.
ולכן אני מתחיל יחסית בקטן, אני חושב ש 5Mbs לכל כיוון יוכל להיות מתאים?

מה שחשוב לי זה שהאתר יהיה מהיר ולכן אני מתעקש על שרת בארץ (אם יש פתרון אחר אני אשמח לשמוע)
ובגלל שכל הסרטונים יומרו אז צריך גם משאבים.

לעבוד מול חווה אתה מתכוון לאחת ספקיות האינטרנט (012,013...)?

yonatan 26-01-11 19:59
חמש מגה יכול להיות טוב לאתר עם תוכן סטטי ( HTML וקצת תמונות קטנות ), ופחות מתאים למדיה זורמת.
פתרון אחר , שרת באירופה, שם רוחב הפס הוא הרבה יותר נדיב.

בהתחשב בעובדה שאתר youtube נמצא בארה"ב ואין לנו בעיה לצפות שם בסרטונים, להגביל את עצמך זו מחשבה מוטעית מהבסיס.

המרת הסרטונים זה אספקט נוסף שעליך לבחון, במקרה של המרת סרטונים , חשוב מאוד לבחון את סוג המעבד אותו תקבל, ואת כמות הזכרון שיוקצה עבורך.

Kernel 26-01-11 20:59
יונתן,
יוטוב מזמן עברו ל-CDN בארץ,
אני צופה בסרט הזה, השרת שמזרים את הסרט הוא 212.199.219.120(אם תלחצו על הלינק תגיעו ל-Google), השרת כנראה נמצא בפתח תקווה בחווה של 012. (או שיש להם כלוב ב-MED1, עם חיבור לכל ה-ISP's).

cateye, רוחב פס של 5mbit שווה ל-10 צופים בו זמנית(בהנחה שהכל ירוק) לסרט באיכות FLV.
ברגע שיש יותר מ-11, מתחיל ה-buffer(הסרט נתקע ונטען כל הזמן).
אם אתה עובד ישר מול החווה(תדלג על 014 - המחירים שלהם מטורפים), ואתה מנהל מו"מ קשיח(בשבילך אין דבר כזה התחייבות לשנה), אתה תגלה מחירים מפתיעים.

עד לא מזמן אני תיחזקתי שרת ששירת 120 איש בזמן השיא(4 בצהריים ו-2 בלילה), באותו הזמן גולשים מעלים סרטים לשרת והעומס היה נסבל. המפרט של השרת: Q9550s וכונן SATA 250Gb.

מצד שני, אני מתחזק לאתר וידאו גדול בארץ את השרתים שלו, הוא הקשיב לאיש מכירות במקום לאיש טכני וקנה ציוד ב-5 ספרות, ועכשיו הציוד שלו "נח" (8 ליבות ו-Load avarage עומד על 0).

yonatan 26-01-11 21:14
ציטוט:
נכתב במקור על ידי Kernel (פרסם 794095)
יונתן,
יוטוב מזמן עברו ל-CDN בארץ,
אני צופה בסרט הזה, השרת שמזרים את הסרט הוא 212.199.219.120(אם תלחצו על הלינק תגיעו ל-Google), השרת כנראה נמצא בפתח תקווה בחווה של 012. (או שיש להם כלוב ב-MED1, עם חיבור לכל ה-ISP's).

cateye, רוחב פס של 5mbit שווה ל-10 צופים בו זמנית(בהנחה שהכל ירוק) לסרט באיכות FLV.
ברגע שיש יותר מ-11, מתחיל ה-buffer(הסרט נתקע ונטען כל הזמן).
אם אתה עובד ישר מול החווה(תדלג על 014 - המחירים שלהם מטורפים), ואתה מנהל מו"מ קשיח(בשבילך אין דבר כזה התחייבות לשנה), אתה תגלה מחירים מפתיעים.

עד לא מזמן אני תיחזקתי שרת ששירת 120 איש בזמן השיא(4 בצהריים ו-2 בלילה), באותו הזמן גולשים מעלים סרטים לשרת והעומס היה נסבל. המפרט של השרת: Q9550s וכונן SATA 250Gb.

מצד שני, אני מתחזק לאתר וידאו גדול בארץ את השרתים שלו, הוא הקשיב לאיש מכירות במקום לאיש טכני וקנה ציוד ב-5 ספרות, ועכשיו הציוד שלו "נח" (8 ליבות ו-Load avarage עומד על 0).
משום מה לי זה נותן מ 74.125.79.*
מוזר! הסרטון שהבאת באמת מגיע מישראל.

בכל מקרה זה לא משנה את העובדה, התקציב שלהם מאפשר להם CDN כזה.
זה לא כלכלי לאתר מתחיל.

Kernel 26-01-11 22:37
לכל גולש זה ייתן IP של הספק שלו - עקרון ה-CDN.

בכל מקרה, מעת לעת חברות השרתים הענקיות בארה"ב, מציעות דילים עם AKAMAI,
AKAMAI יהוו בעצם CACHE ויעמדו בין הלקוחות לשרת.

אפשר לחפש דיל כזה.

cateye 27-01-11 00:15
כן, גם אני קיבלתי IP שונה 209.85.229.19 (קליפורניה)

014 באמת מגזימים עם המחירים שלהם, 012 היו שפויים יותר.
רק כדי להיות בטוח, ה5 מגה שאנחנו מדברים זה אותו 5 שהם רושמים כאן? (או שיש צורך להכפיל ב8)
http://img825.imageshack.us/img825/3416/012qf.jpg

אם כן המצב ממש עצוב.
כמה רוחב פס אני אצטרך אם כך?
אני יכול לרכוש שרת DEDI בצרפת עם נתונים יפים ועם 100Mbps אבל צויין כאן שבגלל המרחק אני אפסיד את רוב רוחב הפס שלי. האם יש פינג מקסימלי שאם אני לא אעבור אותו איכות הצפיה תישאר?

ציינת שהצלחת להעמיד שרת הנותן שירות ל120 + העלאה של סרטים בו זמנית(!), איך עשית את זה?
המפרט שרשמת נראה חזק, אני מבין שזה היה שרת DEDI שלך בארץ?

ואיך אני יכול להשתמש בCDN או אקמאי כדי לשדרג משמעותית את המהירות?

yonatan 27-01-11 00:29
ציטוט:
נכתב במקור על ידי cateye (פרסם 794117)
כן, גם אני קיבלתי IP שונה 209.85.229.19 (קליפורניה)

014 באמת מגזימים עם המחירים שלהם, 012 היו שפויים יותר.
רק כדי להיות בטוח, ה5 מגה שאנחנו מדברים זה אותו 5 שהם רושמים כאן? (או שיש צורך להכפיל ב8)
http://img825.imageshack.us/img825/3416/012qf.jpg

אם כן המצב ממש עצוב.
כמה רוחב פס אני אצטרך אם כך?
אני יכול לרכוש שרת DEDI בצרפת עם נתונים יפים ועם 100Mbps אבל צויין כאן שבגלל המרחק אני אפסיד את רוב רוחב הפס שלי. האם יש פינג מקסימלי שאם אני לא אעבור אותו איכות הצפיה תישאר?

ציינת שהצלחת להעמיד שרת הנותן שירות ל120 + העלאה של סרטים בו זמנית(!), איך עשית את זה?
המפרט שרשמת נראה חזק, אני מבין שזה היה שרת DEDI שלך בארץ?

ואיך אני יכול להשתמש בCDN או אקמאי כדי לשדרג משמעותית את המהירות?
מי סיפר לך שתפסיד את רוחב הפס שלך?
אני מבסס את רוב השרתים שלי בצרפת , בתור אחד שניהל ומנהל שרתים בכל החוות בישראל בניהם נטוויזן 012 ובזק בינלאומי , אני באמת לא מאוכזב מרוחב הפס שאני משלם עליו ומקבל בצרפת.

פינג אינו מדד לאיכות, פינג זו מחסנית מסוג ICMP שאינה מועדפת בנתבים של ספקי האינטרנט , בעצם המחסניות של הפינג מקבלות פחות מאחוז אחד במעבד של הנתבים ( לפחות ברשת שמנוהלת היטב ).


לנוחיותך הוספתי לאשכול פלט פינג לשרת יוטיוב, מול שרת בצרפת לצורך המחשה.


קוד:
C:\>ping youtube.com

Pinging youtube.com [74.125.95.93] with 32 bytes of data:
Reply from 74.125.95.93: bytes=32 time=196ms TTL=51
Reply from 74.125.95.93: bytes=32 time=196ms TTL=51
Reply from 74.125.95.93: bytes=32 time=196ms TTL=51
Reply from 74.125.95.93: bytes=32 time=202ms TTL=51

Ping statistics for 74.125.95.93:
    Packets: Sent = 4, Received = 4, Lost = 0 (0% loss),
Approximate round trip times in milli-seconds:
    Minimum = 196ms, Maximum = 202ms, Average = 197ms

C:\>ping securehost.co.il

Pinging securehost.co.il [178.32.7.96] with 32 bytes of data:
Reply from 178.32.7.96: bytes=32 time=99ms TTL=56
Reply from 178.32.7.96: bytes=32 time=99ms TTL=56
Reply from 178.32.7.96: bytes=32 time=97ms TTL=56
Reply from 178.32.7.96: bytes=32 time=99ms TTL=56

Ping statistics for 178.32.7.96:
    Packets: Sent = 4, Received = 4, Lost = 0 (0% loss),
Approximate round trip times in milli-seconds:
    Minimum = 97ms, Maximum = 99ms, Average = 98ms

C:\>
אגב אל תכפיל ב 8
בחישוב גס ולא בדיוק של ביטים:
5MBIT = 650K/sec
10MBIT = 1200K/sec

לגבי AKAMAI , תכין את הארנק + חיוך לפקידה בבנק.

Kernel 27-01-11 00:36
ציטוט:
נכתב במקור על ידי cateye (פרסם 794117)
כן, גם אני קיבלתי IP שונה 209.85.229.19 (קליפורניה)

014 באמת מגזימים עם המחירים שלהם, 012 היו שפויים יותר.
רק כדי להיות בטוח, ה5 מגה שאנחנו מדברים זה אותו 5 שהם רושמים כאן? (או שיש צורך להכפיל ב8)
http://img825.imageshack.us/img825/3416/012qf.jpg

אם כן המצב ממש עצוב.
כמה רוחב פס אני אצטרך אם כך?
אני יכול לרכוש שרת DEDI בצרפת עם נתונים יפים ועם 100Mbps אבל צויין כאן שבגלל המרחק אני אפסיד את רוב רוחב הפס שלי. האם יש פינג מקסימלי שאם אני לא אעבור אותו איכות הצפיה תישאר?

ציינת שהצלחת להעמיד שרת הנותן שירות ל120 + העלאה של סרטים בו זמנית(!), איך עשית את זה?
המפרט שרשמת נראה חזק, אני מבין שזה היה שרת DEDI שלך בארץ?

ואיך אני יכול להשתמש בCDN או אקמאי כדי לשדרג משמעותית את המהירות?
רוחב פס = מס' המשתמשים כפול 0.55 כפול 8 = כמות ה-Mbps שתצטרך.
לגבי ה-5Mbit, לחלק ב-8.

המצב היום בארץ, שבשעות הלחץ, ספקיות האנטרנט מפעילות תעדוף נתונים, והקו היוצא לחו"ל מצטמצם. ואיכות הצפייה נהרסת.
מעבר לזה, עבדתי עם המון שרתים בארץ ובחו"ל, מבחינת זמן תגובה, אין תחליף לארץ.

השרת שהעלאת כאן הוא שרת וירטואלי, אתה צריך שרת פיזי(כמו השרת שהיה לי). על זה אתה צריך לדבר עם החווה.

cateye 27-01-11 18:40
אוקי, בואו נעשה סיכום קטן.
לאחר מספר לבטים אני מבין שסוג השרת הוא VPS או DEDI, ואם תהיה אפשרות לDEDI מה טוב.

לגבי מהירות, אני מעט מבולבל.
אם אני ארכוש שרת בארץ, הוא יהיה סביבות ה5M
אם אני ארכוש שרת בחו"ל, הוא יהיה סביבות ה100M
לכאורה אין כאן שאלה של ממש היות והשרת בחו"ל הוא בעל רוחב פס גדול משמעותית.
ההפסד היחיד אם אני רוכש שרת בחו"ל הוא בשעות עומס?
אם כך, לא תהיה לי ברירה כי זה יהיה בעיה בשעות עומס מול בעיה של צפיה בכל שאר היום.

קרנל,
החישוב שהראת לי הוא לסרטון ברמת HD?
כי אם אני רוצה להחזיק 50 בו זמנית זה יוצא לי: 50X0.55X8=220
אפילו 2 שרתים של 100M לא יעמדו בזה, אתה בטוח שהחישוב נכון?

והשרת שמחזיק 120+ הוא בארץ?
120X0.55X8=528 וזה אפילו יותר כי גם עשיתם עוד דברים בשרת.
איך הצלחת להתמודד עם כמות כזו?

yonatan 27-01-11 19:39
ציטוט:
נכתב במקור על ידי cateye (פרסם 794173)
אוקי, בואו נעשה סיכום קטן.
לאחר מספר לבטים אני מבין שסוג השרת הוא VPS או DEDI, ואם תהיה אפשרות לDEDI מה טוב.

לגבי מהירות, אני מעט מבולבל.
אם אני ארכוש שרת בארץ, הוא יהיה סביבות ה5M
אם אני ארכוש שרת בחו"ל, הוא יהיה סביבות ה100M
לכאורה אין כאן שאלה של ממש היות והשרת בחו"ל הוא בעל רוחב פס גדול משמעותית.
ההפסד היחיד אם אני רוכש שרת בחו"ל הוא בשעות עומס?
אם כך, לא תהיה לי ברירה כי זה יהיה בעיה בשעות עומס מול בעיה של צפיה בכל שאר היום.

קרנל,
החישוב שהראת לי הוא לסרטון ברמת HD?
כי אם אני רוצה להחזיק 50 בו זמנית זה יוצא לי: 50X0.55X8=220
אפילו 2 שרתים של 100M לא יעמדו בזה, אתה בטוח שהחישוב נכון?

והשרת שמחזיק 120+ הוא בארץ?
120X0.55X8=528 וזה אפילו יותר כי גם עשיתם עוד דברים בשרת.
איך הצלחת להתמודד עם כמות כזו?
נחזור לסיפור של AKAMAI,
אתה מתחיל להבין שכשמדובר בשידורי מדיה זורמת, שרת אחד לא תמיד מספיק בשביל לעמוד בפופולריות.

במקרה כזה, תוכל לבצע מה שנקרא CACHING SDUID,
בעצם התוכן שלך יהיה על שרת גדול שאחראי גם לקידודים והעלאות.
ויהיה לך שרת נוסף ,שהתפקיד שלו הוא סה"כ לשמש כמתווך בין השרתים ללקוחות הקצה.
השרת כמובן יצטרך המון זכרון RAM , והגדרות ספציפיות לאגור את הסרטונים בזכרון שלו , ולא בדיסק הקשיח.
ככה בעצם , רוחב הפס אינו מושפע מגורמים כמו I/O בדיסקים הקשיחים.

כמובן צריך גם לבחור זכרון איכותי עם תכונות תיקון שגיאות.

Kernel 27-01-11 20:27
ציטוט:
נכתב במקור על ידי cateye (פרסם 794173)
אוקי, בואו נעשה סיכום קטן.
לאחר מספר לבטים אני מבין שסוג השרת הוא VPS או DEDI, ואם תהיה אפשרות לDEDI מה טוב.

לגבי מהירות, אני מעט מבולבל.
אם אני ארכוש שרת בארץ, הוא יהיה סביבות ה5M
אם אני ארכוש שרת בחו"ל, הוא יהיה סביבות ה100M
לכאורה אין כאן שאלה של ממש היות והשרת בחו"ל הוא בעל רוחב פס גדול משמעותית.
ההפסד היחיד אם אני רוכש שרת בחו"ל הוא בשעות עומס?
אם כך, לא תהיה לי ברירה כי זה יהיה בעיה בשעות עומס מול בעיה של צפיה בכל שאר היום.

קרנל,
החישוב שהראת לי הוא לסרטון ברמת HD?
כי אם אני רוצה להחזיק 50 בו זמנית זה יוצא לי: 50X0.55X8=220
אפילו 2 שרתים של 100M לא יעמדו בזה, אתה בטוח שהחישוב נכון?

והשרת שמחזיק 120+ הוא בארץ?
120X0.55X8=528 וזה אפילו יותר כי גם עשיתם עוד דברים בשרת.
איך הצלחת להתמודד עם כמות כזו?
אוי אוי, טעות שלי, הנוסחה היא 0.055X8. לסרט FLV באיכות H263.
לסרט HD עם דחיסה יעילה זה עומד על 0.09.

עוד ניפוץ אשלייה, ל-1mbit משלמים 8.4 שקל לחודש, ברוב החוות בארץ, לתעבורה פנים ארצית.


כל הזמנים הם GMT +2. הזמן כעת הוא 13:34.

מופעל באמצעות VBulletin גרסה 3.8.6
כל הזכויות שמורות ©
כל הזכויות שמורות לסולל יבוא ורשתות (1997) בע"מ